日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2603.23950

イベント駆動型プロアクティブ支援操作:接地された視覚言語プランニングによる実現

Event-Driven Proactive Assistive Manipulation with Grounded Vision-Language Planning

シェア:XThreadsFacebookLINEはてブBluesky

ユーザーの指示を待たず、作業空間の状態変化(イベント)を検知して能動的に支援行動を生成するロボット操作フレームワークを提案した。実機のテーブルトップタスクで有効性を検証した。

詳しい要約

1. どんなもの?

- 依頼駆動型の協調操作支援から、人間と物体の相互作用によるワークスペース状態遷移をトリガーとするイベント駆動型の能動的支援への転換を提案。 - イベントモニタで相互作用の進捗を追跡し、イベント完了時に安定化されたpre/postスナップショットを抽出。 - スナップショットから暗黙の状態遷移を分析し、タスクレベルの目標を推論して介入の可否を決定、支援行動列を生成。 - 行動はaction primitivesに制限し、オブジェクトは整数IDで参照することで実行可能性と検証可能性を確保。 - 実機のテーブルトップnumber-block協調タスクで評価。

2. 先行研究と比べてどこがすごい?

- 従来の支援はユーザ指示によって開始されるrequest-drivenが主流で、高レベル推論が要求駆動型であった。 - 本研究は、人間のチームワークのように行動の観察結果から次の支援ステップを推論するevent-driven proactive assistanceへとシフト。 - ユーザ指示を待たずに、ワークスペース状態遷移をトリガーとしてロボット行動を開始する点が新しい。 - 明示的なpre/post状態変化の証拠を用いることで、解決可能な場面での能動的完了と解決不可能な場面での適切な待機を改善。

3. 技術・手法の肝は?

- event monitorが相互作用の進捗を追跡し、イベント完了を検出。 - 完了時に安定化されたpre/postスナップショットを抽出し、状態遷移を特徴づけ。 - plannerがスナップショットから暗黙の状態遷移を分析し、タスクレベルの目標を推論。 - 介入するか否かを決定し、介入する場合は支援行動列を生成。 - 行動はaction primitivesに制限し、オブジェクトは整数IDで参照することで実行可能かつ検証可能な出力を実現。

4. どうやって有効だと検証した?

- 実機のテーブルトップnumber-block協調タスクでフレームワークを評価。 - 明示的なpre/post状態変化の証拠が、解決可能な場面での能動的完了を改善することを示した。 - 解決不可能な場面では適切に待機することを示した。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。同分野の定番として、request-driven assistance、human-robot collaboration、vision-language planning、action primitives、event-driven planningなどの関連研究が考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Fengkai Liu, Hao Su, Haozhuang Chi, Rui Geng, Congzhi Ren, Xuqing Liu, Yucheng Xu, Yuichi Ohsita, Liyun Zhang

分類: cs.RO

原文アブストラクト

Assistance in collaborative manipulation is often initiated by user instructions, making high-level reasoning request-driven. In fluent human teamwork, however, partners often infer the next helpful step from the observed outcome of an action rather than waiting for instructions. Motivated by this, we introduce a shift from request-driven assistance to event-driven proactive assistance, where robot actions are initiated by workspace state transitions induced by human--object interactions rather than user-provided task instructions. To this end, we propose an event-driven framework that tracks interaction progress with an event monitor and, upon event completion, extracts stabilized pre/post snapshots that characterize the resulting state transition. Given the stabilized snapshots, the planner analyzes the implied state transition to infer a task-level goal and decide whether to intervene; if so, it generates a sequence of assistive actions. To make outputs executable and verifiable, we restrict actions to a set of action primitives and reference objects via integer IDs. We evaluate the framework on a real tabletop number-block collaboration task, demonstrating that explicit pre/post state-change evidence improves proactive completion on solvable scenes and appropriate waiting on unsolvable ones.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI