リプレイバッファで効率化する逆強化学習による社会的ナビゲーション
Sample Efficient Social Navigation Using Inverse Reinforcement Learning
人間の軌道観測から逆強化学習で社会的に配慮したナビゲーション方策を学習し、リプレイバッファでサンプル効率を高めた手法を提案・評価した論文。
著者: Bobak H. Baghi, Gregory Dudek
分類: cs.RO, cs.AI, cs.LG
原文アブストラクト
In this paper, we present an algorithm to efficiently learn socially-compliant navigation policies from observations of human trajectories. As mobile robots come to inhabit and traffic social spaces, they must account for social cues and behave in a socially compliant manner. We focus on learning such cues from examples. We describe an inverse reinforcement learning based algorithm which learns from human trajectory observations without knowing their specific actions. We increase the sample-efficiency of our approach over alternative methods by leveraging the notion of a replay buffer (found in many off-policy reinforcement learning methods) to eliminate the additional sample complexity associated with inverse reinforcement learning. We evaluate our method by training agents using publicly available pedestrian motion data sets and compare it to related methods. We show that our approach yields better performance while also decreasing training time and sample complexity.
関連論文
- 廊下シナリオにおける社会的ナビゲーション信号の因果効果の推定社会的ナビゲーション
- ツアーガイドロボットのための社会的ナビゲーション社会的ナビゲーション
- 社会的ロボットの廊下ナビゲーションにおける可読性の再考:意図表現と人間の注意散漫の影響社会的ナビゲーション
- PRISM: 社会的ロボットナビゲーションのための相互作用スタイルと運動の予測表現社会的ナビゲーション
- ロボットが道を尋ねる:コミュニケーション可能な社会的ナビゲーション社会的ナビゲーション
- 社会的ナビゲーションロボットの人間の知覚を予測・改善するための因果的アプローチ社会的ナビゲーション
