ブートストラップ強化学習による河川上のロバストな経路追従
Robust Path Following on Rivers Using Bootstrapped Reinforcement Learning
内陸水路を航行する自律表面艇の舵制御にブートストラップQ学習を適用し、ライン川の実データでPID制御より高い汎化性能と航法精度を示した。
著者: Niklas Paulig, Ostap Okhrin
分類: cs.LG, cs.AI, cs.RO
原文アブストラクト
This paper develops a Deep Reinforcement Learning (DRL)-agent for navigation and control of autonomous surface vessels (ASV) on inland waterways. Spatial restrictions due to waterway geometry and the resulting challenges, such as high flow velocities or shallow banks, require controlled and precise movement of the ASV. A state-of-the-art bootstrapped Q-learning algorithm in combination with a versatile training environment generator leads to a robust and accurate rudder controller. To validate our results, we compare the path-following capabilities of the proposed approach to a vessel-specific PID controller on real-world river data from the lower- and middle Rhine, indicating that the DRL algorithm could effectively prove generalizability even in never-seen scenarios while simultaneously attaining high navigational accuracy.
関連論文
- 動的障害物環境での安全飛行のための予測リスク誘導強化学習強化学習/ナビゲーション
- ManeuverNet: ダブルアクカーマン操舵ロボットの精密操縦のための報酬関数最適化を伴うSoft Actor-Criticフレームワーク強化学習/ナビゲーション
- 二重アクカーマン操舵ロボットの安全な機動のためのSoft Actor-Criticフレームワーク強化学習/ナビゲーション
- 分布強化学習に基づく自律水上艇の統合的意思決定と制御強化学習/ナビゲーション
- 渦流を横切るロボット魚の効率的ナビゲーション強化学習/ナビゲーション
- 自動運転車の安全クリティカル制御のための強化学習強化学習/ナビゲーション
