日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

HRI/視線arXiv:2607.12181

協調的ワード連想ゲームにおける人間とロボットの相互・指示的視線の分析

Analysis of Mutual and Referential Human and Robot Gazes in a Collaborative Word Association Game

シェア:XThreadsFacebookLINEはてブBluesky

NAOロボットと協調ゲームを行う際の人間の視線行動を計測し、ロボットの視線方向が注意や確認要求に与える影響を調べた。

詳しい要約

1. どんなもの?

本論文は、協調的なword association gameにおいて、NAO robotがembodied, LLM-driven conversational partnerとして参加する際の、人間とrobotの相互的・参照的gazeを分析した研究である。参加者はeye tracking glassesを装着し、robotのgaze条件(mutualとreferential)の2条件で実験を行い、gaze coordinates, speech segments, key events, areas of interestsを用いて相互作用を解析した。

2. 先行研究と比べてどこがすごい?

従来のhuman-robot dialogueにおけるgaze研究は、face-to-faceの社会的会話に焦点が当てられており、要求の高いtask-focused interactionにおけるgazeはほとんど知られていなかった。本研究は、協調的なword association gameという認知負荷の高い課題において、robotのgazeが人間の視覚的注意やconfirmation-seeking gazeに与える影響を調べた点で新規性がある。

3. 技術・手法の肝は?

- NAO robotをembodied, LLM-driven conversational partnerとして使用 - 協調的word association gameを実施 - robotのmutual gazeとreferential gazeの2条件を実装 - 参加者のgazeをeye tracking glassesで記録 - gaze coordinates, speech segments, key events, areas of interestsを用いて分析

4. どうやって有効だと検証した?

実験により、robotのgaze orientationはrobotが提案した単語へのtime to first fixationに影響を与えないことを発見した。また、参加者のdialogue lineにconfirmation requestsが含まれる場合、含まれない場合と比べてrobotをより頻繁に見ることを見出した。これらの結果から、課題の認知的負荷の高さにより、referential robot gazeの効果が言語的側面によって覆い隠される可能性が示唆された。

5. 議論はある?

本研究の結果は、協調的で効率的なコミュニケーションを必要とするタスクにおいて、robotのgazeとturn-taking behaviorを設計・検証するための貴重な洞察を提供する。また、課題の認知的負荷が高い場合、言語的側面がreferential robot gazeの効果を上回る可能性が議論されている。

6. 次に読むべき論文は?

要旨からは不明(参照/比較されている研究が明記されていないため)。同分野の定番として、human-robot dialogueにおけるgaze and turn-takingに関する研究や、LLM-driven conversational agentsに関する研究が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jens V. Rüppel, Tim Schreiter, Andrey Rudenko, Achim J. Lilienthal

分類: cs.RO, cs.HC

原文アブストラクト

Robot gaze is a major component of human-robot dialogue coordination. Most studies of gaze in human-robot dialogue focus on face-to-face social conversations, but little is known about gaze in demanding task-focused interactions. In this paper, we investigate how the gaze of a robot game partner affects human visual attention and if humans tend to direct confirmation-seeking gazes towards the robot. In our study, we let participants play a collaborative word association game with a NAO robot acting as an embodied, LLM-driven conversational partner. Our experiments are conducted under two conditions, which implement mutual and referential gazes of the robot respectively. We record participants' gaze using eye tracking glasses and analyze the interactions using gaze coordinates, speech segments, key events and areas of interests. We find that robot gaze orientation does not affect the time to first fixation on words the robot proposed. We also find that participants gaze more often at the robot when their dialogue line contains confirmation requests, compared to when it does not. Our results indicate (likely also due to the cognitively demanding nature of the game) that the verbal aspect of this task overshadows the effects of referential robot gaze. These findings offer valuable insights for designing and validating robot gaze and turn-taking behavior in collaborative tasks which require coordination and efficient communication.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI