選好に基づく行動表現学習による人間とロボットのインタラクションの個人適応
Personalization in Human-Robot Interaction through Preference-based Action Representation Learning
事前学習済みロボット方策を活用し、人間の選好を行動表現学習で取り込むことで、タスク性能を保ちながら効率的に個人適応する手法を提案した。
著者: Ruiqi Wang, Dezhong Zhao, Dayoon Suh, Ziqin Yuan, Guohua Chen, Byung-Cheol Min
分類: cs.RO
原文アブストラクト
Preference-based reinforcement learning (PbRL) has shown significant promise for personalization in human-robot interaction (HRI) by explicitly integrating human preferences into the robot learning process. However, existing practices often require training a personalized robot policy from scratch, resulting in inefficient use of human feedback. In this paper, we propose preference-based action representation learning (PbARL), an efficient fine-tuning method that decouples common task structure from preference by leveraging pre-trained robot policies. Instead of directly fine-tuning the pre-trained policy with human preference, PbARL uses it as a reference for an action representation learning task that maximizes the mutual information between the pre-trained source domain and the target user preference-aligned domain. This approach allows the robot to personalize its behaviors while preserving original task performance and eliminates the need for extensive prior information from the source domain, thereby enhancing efficiency and practicality in real-world HRI scenarios. Empirical results on the Assistive Gym benchmark and a real-world user study (N=8) demonstrate the benefits of our method compared to state-of-the-art approaches.
関連論文
- 人間とロボットの相互作用のための確率的物理デジタルツイン人間ロボットインタラクション
- ロボットのユーモアを交えた謝罪が信頼回復に与える影響の研究人間ロボットインタラクション
- 公共空間におけるRoboCafé:長期的な人間とロボットのインタラクションにおける継続性人間ロボットインタラクション
- 教師の期待とロボット学習を結ぶ結合ダイナミクス人間ロボットインタラクション
- 共形リスク制御を用いた人間とロボットのインタラクションのための安全な確率的計画人間ロボットインタラクション
- 自然言語環境に向けて:自然言語による人間と複数ロボットのシームレスなインタラクションの理解人間ロボットインタラクション
