大規模言語モデルを人間-ロボット相互作用のゼロショット人間モデルとして活用する
Large Language Models as Zero-Shot Human Models for Human-Robot Interaction
大規模言語モデルを人間モデルとして使い、人間-ロボット相互作用の計画に応用できるか検証した研究。社会データセットでの性能評価と、信頼ベースの机片付け・食器渡し実験を通じて有効性と限界を示した。
著者: Bowen Zhang, Harold Soh
分類: cs.RO, cs.CL, cs.HC, cs.LG
原文アブストラクト
Human models play a crucial role in human-robot interaction (HRI), enabling robots to consider the impact of their actions on people and plan their behavior accordingly. However, crafting good human models is challenging; capturing context-dependent human behavior requires significant prior knowledge and/or large amounts of interaction data, both of which are difficult to obtain. In this work, we explore the potential of large-language models (LLMs) -- which have consumed vast amounts of human-generated text data -- to act as zero-shot human models for HRI. Our experiments on three social datasets yield promising results; the LLMs are able to achieve performance comparable to purpose-built models. That said, we also discuss current limitations, such as sensitivity to prompts and spatial/numerical reasoning mishaps. Based on our findings, we demonstrate how LLM-based human models can be integrated into a social robot's planning process and applied in HRI scenarios. Specifically, we present one case study on a simulated trust-based table-clearing task and replicate past results that relied on custom models. Next, we conduct a new robot utensil-passing experiment (n = 65) where preliminary results show that planning with a LLM-based human model can achieve gains over a basic myopic plan. In summary, our results show that LLMs offer a promising (but incomplete) approach to human modeling for HRI.
関連論文
- 固定参照ポーズ残差による人間-ロボット相互作用予測のデータセット間手がかり転移の測定人間-ロボット相互作用
- 予測符号化に基づく人間-ロボット相互作用における内部生成処理と外部結合処理の自律的調整人間-ロボット相互作用
- 車椅子とロボットアームの統合制御のための対話ベース人間-ロボット相互作用プロトコル人間-ロボット相互作用
- RGB映像からの姿勢・感情手がかりを用いた実時間人間-ロボット相互作用意図検出とカメラ間モデル汎化人間-ロボット相互作用
- MIHRaGe: 視線制御による人間-ロボット相互作用のための複合現実インターフェース人間-ロボット相互作用
- 人間と人工エージェントの相互作用における明示的・暗黙的コミュニケーションの混合効果に関する研究人間-ロボット相互作用
