オフライン強化学習による動的環境下でのロボット群衆ナビゲーション
Robot Crowd Navigation in Dynamic Environment with Offline Reinforcement Learning
事前収集した歩行者との相互作用データを使い、時空間状態を暗黙的Q学習に統合したオフライン強化学習で、安全かつ高効率なロボット群衆ナビゲーションを実現した。
著者: Shuai Zhou, Hao Fu, Haodong He, Wei Liu
分類: cs.RO
原文アブストラクト
Robot crowd navigation has been gaining increasing attention and popularity in various practical applications. In existing research, deep reinforcement learning has been applied to robot crowd navigation by training policies in an online mode. However, this inevitably leads to unsafe exploration, and consequently causes low sampling efficiency during pedestrian-robot interaction. To this end, we propose an offline reinforcement learning based robot crowd navigation algorithm by utilizing pre-collected crowd navigation experience. Specifically, this algorithm integrates a spatial-temporal state into implicit Q-Learning to avoid querying out-of-distribution robot actions of the pre-collected experience, while capturing spatial-temporal features from the offline pedestrian-robot interactions. Experimental results demonstrate that the proposed algorithm outperforms the state-of-the-art methods by means of qualitative and quantitative analysis.
関連論文
- 予測誤差を考慮したMPCによる社会的配慮型群衆ナビゲーション群衆ナビゲーション
- 危険を冒すな!LiDARのみの群衆ナビゲーションのための軌道条件付き分布リスク群衆ナビゲーション
- 適応的楕円型共形予測によるリスク感応型群衆ナビゲーション群衆ナビゲーション
- 軌道品質を重視した群衆ナビゲーション性能向上のための新手法群衆ナビゲーション
- 適合的不確実性処理による群衆ナビゲーションの汎化安全群衆ナビゲーション
- 学習ベース軌道予測を用いたMPCによる群衆ナビゲーション群衆ナビゲーション
