安全なロボットナビゲーションのためのモデルフリー神経リアプノフ制御
Model-free Neural Lyapunov Control for Safe Robot Navigation
強化学習の制御方策と双子の神経リアプノフ関数を同時学習し、実行時モニタで経路計画と組み合わせることで衝突のない安全なナビゲーションを実現した。
著者: Zikang Xiong, Joe Eappen, Ahmed H. Qureshi, Suresh Jagannathan
分類: cs.RO, cs.LG
原文アブストラクト
Model-free Deep Reinforcement Learning (DRL) controllers have demonstrated promising results on various challenging non-linear control tasks. While a model-free DRL algorithm can solve unknown dynamics and high-dimensional problems, it lacks safety assurance. Although safety constraints can be encoded as part of a reward function, there still exists a large gap between an RL controller trained with this modified reward and a safe controller. In contrast, instead of implicitly encoding safety constraints with rewards, we explicitly co-learn a Twin Neural Lyapunov Function (TNLF) with the control policy in the DRL training loop and use the learned TNLF to build a runtime monitor. Combined with the path generated from a planner, the monitor chooses appropriate waypoints that guide the learned controller to provide collision-free control trajectories. Our approach inherits the scalability advantages from DRL while enhancing safety guarantees. Our experimental evaluation demonstrates the effectiveness of our approach compared to DRL with augmented rewards and constrained DRL methods over a range of high-dimensional safety-sensitive navigation tasks.
関連論文
- 先読み安全コリドーによるバリア状態ベースの複雑環境安全ナビゲーション安全ナビゲーション
- 音リスク認識を組み込んだ制御バリア関数による建設現場でのロボット安全ナビゲーション安全ナビゲーション
- 動的環境における安全なロボットナビゲーションのための動的対数ガウス過程制御バリア関数安全ナビゲーション
- 未知環境における安全なナビゲーションのための局所占有格子地図からの制御バリア関数のオンライン合成安全ナビゲーション
- 多面体間の安全なナビゲーションのためのミンコフスキー演算に基づく制御バリア関数安全ナビゲーション
- 認定アクター・クリティック:制御バリア関数を用いた安全ナビゲーションのための階層強化学習安全ナビゲーション
