日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2602.05760

脚式マニピュレータによるタスク指向のロボット-人間間ハンドオーバー

Task-Oriented Robot-Human Handovers on Legged Manipulators

シェア:XThreadsFacebookLINEはてブBluesky

LLMによるアフォーダンス推論とテクスチャベースの転移を組み合わせ、未知の物体とタスクの組でもゼロショットで適切な受け渡し姿勢を実現するフレームワークを提案し、脚式マニピュレータで実証した。

詳しい要約

1. どんなもの?

- 脚式マニピュレータ上でのタスク指向ハンドオーバー(TOH)を実現するフレームワーク AFT-Handover を提案。 - 人間が受け取った後の使用を想定し、物体を適切な向きで提示することを目的とする。 - LLM による affordance 推論と texture ベースの affordance 転移を統合し、zero-shot で汎化可能な TOH を目指す。 - 新規の物体-タスクペアに対し、データベースから proxy exemplar を検索し、LLM 推論で part-level 対応を確立、affordance を texturize して point cloud 転移を行う。

2. 先行研究と比べてどこがすごい?

- 既存手法は物体やタスク固有の affordance に基づくため、新規シナリオへの汎化能力が限定的。 - 提案手法は LLM 駆動の affordance 推論と効率的な texture ベース affordance 転移を統合し、zero-shot で汎化可能な TOH を実現。 - 多様なタスク-物体ペアでハンドオーバー成功率と汎化性能がベースラインより向上。 - 比較ユーザー研究で現状の state-of-the-art より有意に好まれ、道具使用前の人間の再把持を効果的に削減。

3. 技術・手法の肝は?

- LLM 駆動の affordance 推論を利用。 - 新規の物体-タスクペアに対し、データベースから proxy exemplar を検索。 - LLM 推論により part-level の対応を確立。 - affordance を texturize し、feature-based な point cloud 転移を実行。 - これにより zero-shot で汎化可能な TOH を実現。

4. どうやって有効だと検証した?

- 多様なタスク-物体ペアで AFT-Handover を評価。 - ハンドオーバー成功率と汎化性能がベースラインより向上することを示した。 - 比較ユーザー研究を実施し、現状の state-of-the-art より有意に好まれることを確認。 - 人間が道具を使用する前の再把持を効果的に削減できることを示した。 - 脚式マニピュレータ上で TOH を実証し、実世界のロボット-人間ハンドオーバーへの可能性を示した。

5. 議論はある?

- 要旨からは不明。 - 限界や失敗事例、計算コスト、LLM 推論の信頼性、実環境での安全性などについての議論は要旨では触れられていない。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として、object- or task-specific affordances に基づく既存の TOH アプローチ、および current state-of-the-art とされる手法が挙げられる。 - 同分野の定番として、affordance learning、point cloud 転移、LLM を用いたロボティクス推論に関する研究が次に読むべき候補となる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Andreea Tulbure, Carmen Scheidemann, Elias Steiner, Marco Hutter

分類: cs.RO, cs.HC

原文アブストラクト

Task-oriented handovers (TOH) are fundamental to effective human-robot collaboration, requiring robots to present objects in a way that supports the human's intended post-handover use. Existing approaches are typically based on object- or task-specific affordances, but their ability to generalize to novel scenarios is limited. To address this gap, we present AFT-Handover, a framework that integrates large language model (LLM)-driven affordance reasoning with efficient texture-based affordance transfer to achieve zero-shot, generalizable TOH. Given a novel object-task pair, the method retrieves a proxy exemplar from a database, establishes part-level correspondences via LLM reasoning, and texturizes affordances for feature-based point cloud transfer. We evaluate AFT-Handover across diverse task-object pairs, showing improved handover success rates and stronger generalization compared to baselines. In a comparative user study, our framework is significantly preferred over the current state-of-the-art, effectively reducing human regrasping before tool use. Finally, we demonstrate TOH on legged manipulators, highlighting the potential of our framework for real-world robot-human handovers.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI