日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2610.27917

イベント駆動型メモリ更新による履歴依存マニピュレーション

EventSync: Event-Driven Memory Updates for History-Dependent Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

視覚言語モデルとVLAモデルを組み合わせた階層型フレームワークで、軽量なイベントモニタがサブゴール完了を判定してメモリを更新し、履歴依存の操作タスクを高精度に遂行する。

詳しい要約

1. どんなもの?

- 履歴依存のロボット操作のための階層的フレームワーク EventSync を提案 - 高レベル: vision-language model がタスク計画と interaction history から subgoal を生成 - 低レベル: vision-language-action model が subgoal を実行 - 軽量な Event Monitor が subgoal 完了を判定し、event-driven に memory を更新 - 完了証拠が得られて初めて completed-subgoal history に記録し次の推論を起動

2. 先行研究と比べてどこがすごい?

- 従来の階層的フレームワークは memory 更新に正確な完了評価を要し、類似観測が異なる実行段階に対応しうる点が課題 - 早期に完了を記録すると後続の subgoal reasoning を誤導する問題があった - EventSync は event-driven な memory 更新でこの誤記録を抑制 - RoboMME で overall success 64.5%、benchmark 報告の最良 baseline を 20.0 percentage points 上回る

3. 技術・手法の肝は?

- vision-language model による subgoal 生成と vision-language-action model による実行の階層構成 - 軽量 Event Monitor が visual observations と end-effector trajectories を組み合わせて subgoal 完了を判定 - 完了証拠が得られるまで completed-subgoal history への記録と次推論の起動を遅延 - executor 側に visual history を保持

4. どうやって有効だと検証した?

- RoboMME benchmark で overall success 64.5% を達成し、報告済み最良 baseline を 20.0 percentage points 上回る - 更新メカニズムが信頼できる completed-subgoal history 構築に寄与することを追加分析で示す - 異なる memory 要求を持つ 4 つの real-robot タスクで実世界操作の有効性を検証

5. 議論はある?

- 完了判定の誤りが subgoal reasoning を誤導する問題に対し、event-driven 更新の有効性を主張 - 更新メカニズムが reliable な completed-subgoal history 構築に寄与すると分析 - 限界や失敗事例、Event Monitor の誤判定リスクなどの詳細は要旨からは不明

6. 次に読むべき論文は?

- 要旨で比較対象として明示された baseline 論文は記載なし - 関連手法として hierarchical frameworks、vision-language model、vision-language-action model、RoboMME benchmark を参照 - 同分野の定番として vision-language-action モデルや階層的タスク計画の代表的研究を次に読む候補とする

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jingjiao Zhao, Dong Jing, Mingyu Cao, Ruochuan Shi, Xiansheng Chen, Pengwei Wang, Zhiwu Lu

分類: cs.RO

原文アブストラクト

History-dependent robotic manipulation requires task context and interaction history, as the current observation alone is insufficient to determine the next action. Hierarchical frameworks use task memory for high-level subgoal reasoning and low-level policies for execution. However, memory updates require accurate completion assessment: similar observations may correspond to different execution phases, and prematurely recording completion can mislead subsequent subgoal reasoning. We present EventSync, a hierarchical framework that coordinates task reasoning and action execution through event-driven memory updates. A vision-language model generates subgoals from task plans and interaction history, while a vision-language-action model executes them. A lightweight Event Monitor combines visual observations with end-effector trajectories to determine whether the current subgoal is complete. The framework records the current subgoal in its completed-subgoal history and triggers subsequent reasoning only after obtaining completion evidence. With visual history in the executor, EventSync achieves 64.5% overall success on RoboMME, exceeding the best baseline reported in the benchmark by 20.0 percentage points. Further analysis shows that this update mechanism helps build a reliable completed-subgoal history. Experiments on four real-robot tasks with different memory requirements validate the framework's effectiveness in real-world robotic manipulation.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI