見知らぬ危険!強化学習ベースのソーシャルロボットナビゲーションにおける予測不能な歩行者の識別と回避
Stranger Danger! Identifying and Avoiding Unpredictable Pedestrians in RL-based Social Robot Navigation
強化学習によるソーシャルナビゲーションで、歩行者の予測不能性を学習プロセスに組み込み、未知の状況でも慎重に行動できるように改良し、衝突を82%削減した。
著者: Sara Pohland, Alvin Tan, Prabal Dutta, Claire Tomlin
分類: cs.RO, cs.AI
原文アブストラクト
Reinforcement learning (RL) methods for social robot navigation show great success navigating robots through large crowds of people, but the performance of these learning-based methods tends to degrade in particularly challenging or unfamiliar situations due to the models' dependency on representative training data. To ensure human safety and comfort, it is critical that these algorithms handle uncommon cases appropriately, but the low frequency and wide diversity of such situations present a significant challenge for these data-driven methods. To overcome this challenge, we propose modifications to the learning process that encourage these RL policies to maintain additional caution in unfamiliar situations. Specifically, we improve the Socially Attentive Reinforcement Learning (SARL) policy by (1) modifying the training process to systematically introduce deviations into a pedestrian model, (2) updating the value network to estimate and utilize pedestrian-unpredictability features, and (3) implementing a reward function to learn an effective response to pedestrian unpredictability. Compared to the original SARL policy, our modified policy maintains similar navigation times and path lengths, while reducing the number of collisions by 82% and reducing the proportion of time spent in the pedestrians' personal space by up to 19 percentage points for the most difficult cases. We also describe how to apply these modifications to other RL policies and demonstrate that some key high-level behaviors of our approach transfer to a physical robot.
関連論文
- RESONATE: 自律サービスロボットのための実環境ソーシャルナビゲーション評価ベンチマークソーシャルナビゲーション
- Arena 5.0: ソーシャルナビゲーション開発・評価のためのフォトリアリスティックなROS2シミュレーションフレームワークソーシャルナビゲーション
- LiDARから直接制御する安全なソーシャルナビゲーションのためのマルチタスク強化学習と確率的知覚ソーシャルナビゲーション
- インターネット動画から方策状態空間でソーシャルナビゲーションを学習ソーシャルナビゲーション
- どこに加わるべきか?言語誘導型目標予測によるロボットのグループ参加ソーシャルナビゲーション
- PISHYAR: 視覚障害者向けの社会的インテリジェントなスマート杖による屋内ソーシャルナビゲーションとマルチモーダルな人間-ロボットインタラクションソーシャルナビゲーション
