日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2609.23578

AR-WAM: 視覚条件付きエージェント対応ワールドアクションモデルによるロボットマニピュレーション

AR-WAM: A Visual-Conditioned Agent-Ready World Action Model for Robotic Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

言語指示の代わりにバウンディングボックスと操作トークンで条件付けする0.5Bパラメータの世界行動モデルを提案し、エージェント駆動のロボット制御を実現した。

詳しい要約

1. どんなもの?

- 視覚条件付きの agent-ready な world action model『AR-WAM』を提案 - 言語指示の代わりに2つの条件を用いる - visual grounding prompt: 対象物と位置を示す bounding box - learnable operation token: 実行する atomic skill を指定 - 0.5B パラメータの小型モデル - frozen な pretrained visual encoder を使用 - language encoder を持たない - 潜在状態で scene evolution を予測しつつ action を decode - 推論意図を明示的・supervisable な reasoning signal として露出 - model-agnostic な compatibility layer が detect / execute / query の3 primitive を提供 - 長期 memory と closed-loop error recovery は agent 側に委…

2. 先行研究と比べてどこがすごい?

- 従来の VLA や WAM は自然言語指示に依存していた - 著者らは言語指示を agent-driven control に不適と主張 - referential ambiguity - spatial imprecision - agent の言語理解と冗長 - intent と execution の混在 - AR-WAM は言語を排除し visual grounding prompt と operation token で条件付け - 標準 manipulation では最強 baseline と同等(平均 87.2% 成功) - memory 依存タスクで +5.9%、実機 long-horizon タスクで +36.7% の成功率改善 - 最低の推論 latency 14.1 ms を維持

3. 技術・手法の肝は?

- 言語 encoder を使わず frozen pretrained visual encoder のみで視覚入力処理 - 2つの条件でタスクを指定 - visual grounding prompt: 対象物・位置の bounding box - learnable operation token: atomic skill を指定 - compact な latent state 内で scene evolution を予測し action を decode - 明示的・supervisable な reasoning signal で policy の intent を露出 - model-agnostic compatibility layer の3 primitive - detect - execute - query - これにより local VLM や online agent API が直接 policy を駆動可能 - long-horizon memory と closed-loop error recovery は agent 側が担当

4. どうやって有効だと検証した?

- RoboTwin 2.0、RMBench、実機 Astribot S1 dual-arm platform で評価 - 標準 manipulation で最強 baseline と同等(平均 87.2% 成功) - memory 依存タスクで +5.9% の成功率改善 - 実機 long-horizon タスクで +36.7% の成功率改善 - 推論 latency は 14.1 ms で最低水準を維持

5. 議論はある?

- 言語指示の限界を出発点に、agent-driven control 向け interface を再設計 - 言語を排除し visual grounding prompt と operation token に置換 - long-horizon memory と closed-loop error recovery を agent 側に委譲する設計 - 小型 0.5B モデルで性能と低 latency を両立 - ただし要旨からは、失敗事例・限界・ablation の詳細は不明

6. 次に読むべき論文は?

- 要旨で参照・比較されている研究や関連手法は明示されていない - 同分野の定番として VLA (vision-language-action) モデル、world action model (WAM)、RoboTwin 2.0、RMBench、Astribot S1 が挙げられる - 具体的な次読論文は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yicheng Jiang, Zesen Gan, Xiaobo Wang, Tianlun He, Chenxu Zhao, Minghui Wu, Xinyue Wang, Jiaxu Wang, Junhao He, Jianan Wang, Qiming Shao

分類: cs.RO

原文アブストラクト

As AI agents become increasingly capable, agent-driven robotic control is emerging as a compelling paradigm. However, prevailing vision-language-action (VLA) models and world action models (WAMs) still rely on natural-language instructions to specify manipulation tasks, an ill-suited interface for agent-driven control: referentially ambiguous, spatially imprecise, redundant with the agent's inherent language understanding, and entangling intent with execution. We present AR-WAM, a visual-conditioned, agent-ready world action model that replaces language with two complementary conditions: a visual grounding prompt (a bounding box of the target) denoting the interaction object and location, and a learnable operation token dictating the atomic skill to execute. Our compact 0.5B-parameter model, with a frozen pretrained visual encoder and no language encoder, predicts scene evolution within compact latent states while decoding actions, exposing the policy's intent through explicit, supervisable reasoning signals. A model-agnostic compatibility layer provides three primitives (detect, execute, and query) so that local VLMs or online agent APIs can drive the policy directly, with long-horizon memory and closed-loop error recovery delegated to the agent side. On RoboTwin 2.0, RMBench, and a real Astribot S1 dual-arm platform, AR-WAM matches the strongest baselines on standard manipulation (87.2% average success) and outperforms them on memory-dependent and real-robot long-horizon tasks, improving success rates by 5.9% and 36.7%, respectively, while maintaining the lowest inference latency (14.1 ms).

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI