日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLA/移動操作arXiv:2607.00678

ABot-M0.5: 移動と操作を統合した世界行動モデル

ABot-M0.5: Unified Mobility-and-Manipulation World Action Model

シェア:XThreadsFacebookLINEはてブBluesky

移動操作ロボットのための世界行動モデルを提案し、時間粒度・行動空間・学習と推論の整合性を揃えることで、長期的なタスク実行の精度とロバスト性を向上させた。

詳しい要約

1. どんなもの?

ABot-M0.5は、モバイルマニピュレーションのための新しいWorld Action Model (WAM)を提案する。VLAポリシーは反応的で明示的な世界モデルを欠き、既存のWAMは粗いビデオチャンクで動作し、ナビゲーションとマニピュレーションの行動を絡め、自己回帰推論と一致しない逆動力学学習を行うため、細かい接触ダイナミクスを見逃し、行動分布の衝突や長期的な誤差蓄積を起こす。ABot-M0.5は、時間粒度、行動空間、訓練-テスト整合性の3レベルでの整合が重要という洞察に基づく。

2. 先行研究と比べてどこがすごい?

既存のWAMは粗いビデオチャンクで動作し、ナビゲーションとマニピュレーションの行動を絡めてモデル化し、逆動力学を自己回帰推論と一致しない監視で訓練する。ABot-M0.5は、中間潜在行動を導入して時間粒度を整合し、二重レベルMixture-of-Transformersで行動空間を分離し、dream-forcing訓練戦略で推論条件を整合する点で優れる。

3. 技術・手法の肝は?

手法の肝は3つの整合にある。1) 時間粒度: 局所的な視覚状態遷移を捉える中間潜在行動を導入し、ビデオ潜在と身体特異的制御の間の橋渡し行動空間とする。2) 行動空間: 二重レベルMixture-of-Transformersアーキテクチャで、モダリティ表現とベース移動やアーム操作などの異種行動部分空間を分離する。3) 推論条件: dream-forcing訓練戦略で、モデル予測ビデオ上で逆動力学を段階的に訓練し、自己回帰予測中の訓練-テスト整合性とロバスト性を向上させる。

4. どうやって有効だと検証した?

挑戦的なモバイルおよび細かいマニピュレーションベンチマークでの実験により、長期的なタスク成功率と細かい制御精度の両方で最先端の性能を達成することを示した。

5. 議論はある?

要旨からは、提案手法の限界や将来の課題についての議論は不明。ただし、粒度整合、行動分離、推論整合の重要性を強調している。

6. 次に読むべき論文は?

要旨で参照されているWorld Action Models (WAMs)やVLAポリシーに関する研究、およびモバイルマニピュレーションのベンチマークに関する論文が挙げられる。具体的には、既存のWAMの手法やVLAモデル、関連するベンチマークの論文が該当する。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ronghan Chen, Yandan Yang, Zuojin Tang, Dongjie Huo, Tong Lin, Haoning Wu, Haoyun Liu, Yuzhi Chen, Lulu Zheng, Botai Yuan, Tianlun Li, Mingxin Wang, Dekang Qi, Bin Hu, Wei Mei, Yuze Xuan, Haolong Yang, Yanqing Zhu, Mu Xu, Zhiheng Ma, Xinyuan Chang

分類: cs.CV, cs.RO

原文アブストラクト

Mobile manipulation is a key capability for general-purpose robots, yet remains challenging for current embodied learning methods. VLA policies are typically reactive and lack explicit world modeling, while existing World Action Models (WAMs) are still poorly aligned with the structure of mobile manipulation: they operate on coarse video chunks, model entangled navigation-manipulation actions, and train inverse dynamics under supervision that does not match autoregressive inference. As a result, they often miss fine-grained contact dynamics, suffer from action-distribution conflicts, and accumulate errors over long-horizon rollouts. We propose ABot-M0.5, a new WAM built on the insight that mobile manipulation requires alignment at three levels: temporal granularity, action space, and train-test consistency. To align temporal granularity, we introduce intermediate latent actions that capture local visual state transitions and serve as an bridging action space between video latents and embodiment-specific controls. To align action space, we design a dual-level Mixture-of-Transformers architecture that disentangles both modality representations and heterogeneous action subspaces such as base movement and arm manipulation. To align inference conditions, we propose the dream-forcing training strategy that progressively trains inverse dynamics on model-predicted videos, improving train-test alignment and robustness during autoregressive prediction. Experiments on challenging mobile and fine-grained manipulation benchmarks demonstrate that ABot-M0.5 achieves state-of-the-art performance in both long-horizon task success and finegrained control accuracy. These results highlight the critical importance of granularity-aligned, action-disentangled, and inference-consistent world-action modeling.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI