人間の方向性修正から学ぶロボットの目的関数学習
Learning from Human Directional Corrections
人間が修正の方向だけを示せばよい手法を提案し、大きさを指定する従来法より効率的にロボットが目的関数を学習できることを示した。
著者: Wanxin Jin, Todd D. Murphey, Zehui Lu, Shaoshuai Mou
分類: cs.RO, cs.LG, cs.SY, eess.SY
原文アブストラクト
This paper proposes a novel approach that enables a robot to learn an objective function incrementally from human directional corrections. Existing methods learn from human magnitude corrections; since a human needs to carefully choose the magnitude of each correction, those methods can easily lead to over-corrections and learning inefficiency. The proposed method only requires human directional corrections -- corrections that only indicate the direction of an input change without indicating its magnitude. We only assume that each correction, regardless of its magnitude, points in a direction that improves the robot's current motion relative to an unknown objective function. The allowable corrections satisfying this assumption account for half of the input space, as opposed to the magnitude corrections which have to lie in a shrinking level set. For each directional correction, the proposed method updates the estimate of the objective function based on a cutting plane method, which has a geometric interpretation. We have established theoretical results to show the convergence of the learning process. The proposed method has been tested in numerical examples, a user study on two human-robot games, and a real-world quadrotor experiment. The results confirm the convergence of the proposed method and further show that the method is significantly more effective (higher success rate), efficient/effortless (less human corrections needed), and potentially more accessible (fewer early wasted trials) than the state-of-the-art robot learning frameworks.
関連論文
- 他者への配慮を考慮した空間的人間-エージェントインタラクションモデル人間-ロボットインタラクション
- 視覚言語モデルを社会的知能の代理として活用する人間-ロボットインタラクション人間-ロボットインタラクション
- 説明可能な人間-ロボットインタラクションのための心の理論人間-ロボットインタラクション
- ロボットが「ノー」と言うとき:説明による信頼の時間的回復人間-ロボットインタラクション
- 産業メタバースにおけるリアルタイム人間-ロボットインタラクションのためのタスク指向エッジ支援クロスシステム設計人間-ロボットインタラクション
- 操作者の模倣による自律的な人間-ロボットインタラクション人間-ロボットインタラクション
