日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

データセット/インタラクションarXiv:2606.31682

HABIT: ロボット操作のための人間認識行動とインタラクション訓練データセット

HABIT: Human-Aware Behavior and Interaction Training Dataset for Robot Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

人間が存在する環境でのロボット操作のための大規模デモデータセットHABITを構築し、人間との協調・共有・指示の3役割でタスクを整理。人間存在データで訓練することで、人間認識行動が獲得できることを示した。

詳しい要約

1. どんなもの?

- 大規模なロボット実演データセット HABIT を提案。 - 人間が存在する環境でのロボットマニピュレーションを対象。 - 人間とロボットの関わりを3役割に分類。 - Collaborator: 共同作業 - Coworker: 共有空間で別作業 - Supervisor: 人間が指示 - 60タスク、10Kエピソード超、160時間超。 - 人間の存在をデータセット多様性の新軸として導入。

2. 先行研究と比べてどこがすごい?

- 既存の大規模実演データセットは人間不在環境で収集。 - そのためロボット単独では有能でも、人間を意識した行動が欠如。 - HABIT は人間存在環境のデータを提供。 - 人間を意識した行動を引き出せる点が新しい。 - 人間とのインタラクションタスクへの迅速な適応も可能。

3. 技術・手法の肝は?

- 人間とロボットのインタラクションを3役割で整理。 - Collaborator, Coworker, Supervisor - 各役割に対応するタスクを収集。 - 大規模実演データセットを構築。 - 人間存在下での行動を学習させる。 - 具体的な収集手法やモデルは要旨からは不明。

4. どうやって有効だと検証した?

- 人間存在データで訓練すると、ロボットのみのデータでは得られない人間認識行動が発現。 - Collaborator: 時空間同期 - Coworker: 譲り合い - Supervisor: ジェスチャー接地 - HABIT での訓練により、新しい人間-ロボットインタラクションタスクへの迅速な適応を確認。 - 実験の詳細は要旨からは不明。

5. 議論はある?

- 人間存在をデータセット多様性の新軸として提案。 - 人間と共有する環境へロボット政策を拡張。 - 限界や課題については要旨からは不明。 - 倫理的配慮やデータ収集の詳細も要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 同分野の定番として Open X-Embodiment, RT-1, RT-2, BridgeData などが考えられる。 - 人間-ロボットインタラクションのデータセットとしては HRI 関連の研究が参考になる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jaehwi Song, Suchae Jeong, Byeongguk Jeon, Sungdong Kim, Minjoon Seo, Hyungmok Son, Kimin Lee

分類: cs.RO

原文アブストラクト

Large-scale demonstration datasets have been central to recent progress in general-purpose robot policies. However, existing datasets are collected in human-absent settings, and policies trained on such data may perform tasks competently in isolation but fail to exhibit human-aware behaviors. To address this gap, we introduce HABIT, a large-scale robot demonstration dataset for human-present environments. We organize tasks into three roles capturing distinct modes of human-robot interaction: Collaborator, where human and robot jointly accomplish a task; Coworker, where they pursue separate tasks in a shared space; and Supervisor, where the human directs the robot. The dataset comprises over 10K episodes and over 160 hours across 60 tasks. Our experiments show that training on human-present data elicits human-aware behaviors that robot-only data fails to produce: spatiotemporal synchronization in Collaborator tasks, yielding in Coworker tasks, and gesture grounding in Supervisor tasks. Moreover, training on HABIT enables rapid adaptation to new human-robot interaction tasks. By introducing human presence as a new axis of dataset diversity, HABIT extends robot policies to environments shared with humans.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI