日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

世界モデル/操作arXiv:2606.13672

WEAVER:ロボット操作のための高性能・高速・長期的な世界モデル

WEAVER, Better, Faster, Longer: An Effective World Model for Robotic Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

ロボット操作のための世界モデルWEAVERを提案し、忠実性・一貫性・効率性を同時に達成。実機でポリシー評価・改善・計画に有効であることを示した。

詳しい要約

1. どんなもの?

- ロボットマニピュレーションのためのWorld Model (WM) であるWEAVERを提案 - 学習されたシミュレータとして、policy evaluation, policy improvement, test-time planningを実現 - 多視点(multi-view)のWMで、future latentsとreward valuesを予測 - 忠実性(fidelity)、一貫性(consistency)、効率性(efficiency)の3要件を同時に満たす - 実機ロボットで有効性を検証

2. 先行研究と比べてどこがすごい?

- 従来のWMは上記3要件を同時に満たすのが困難 - WEAVERは3要件を同時に達成し、ロボットマニピュレーションでstate-of-the-art - 長期的な動的マニピュレーションタスクで従来手法を凌駕 - out-of-distributionシナリオでもprior WMsより高性能 - test-time planningでprior WMs比5-10倍の高速化

3. 技術・手法の肝は?

- 多視点(multi-view)のWMアーキテクチャ - flow-matching lossによりfuture latentsとreward valuesを予測 - モデルアーキテクチャ、メモリ、予測目的に関する設計決定を蒸留 - 長期的動的マニピュレーションを可能にする設計 - 具体的なアーキテクチャ詳細は要旨からは不明

4. どうやって有効だと検証した?

- 実機ロボットで検証 - policy evaluation: 実世界成功率とρ=0.870の相関 - policy improvement: π_{0.5} robot foundation model上で実世界成功率38%改善 - test-time planning: 実世界成功率14%改善、prior WMs比5-10倍高速化 - out-of-distributionシナリオでもprior WMsより高性能

5. 議論はある?

- 要旨からは不明 - 限界や失敗事例、計算コスト、汎化性の議論は明示されていない

6. 次に読むべき論文は?

- π_{0.5} robot foundation model - その他のprior world models (具体的名称は要旨からは不明) - flow-matching loss関連手法 - 同分野の定番: Dreamer, PlaNet, SimPLeなど

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Arnav Kumar Jain, Yilin Wu, Jesse Farebrother, Gokul Swamy, Andrea Bajcsy

分類: cs.RO

原文アブストラクト

The potential impacts of world models (WMs, i.e., learned simulators) on robotics are far-reaching -- policy evaluation, policy improvement, and test-time planning -- all with limited real-world interaction. To unlock these downstream capabilities, a WM needs to jointly satisfy three desiderata: $\textit{(i)}$ fidelity (i.e., producing simulated trajectories that correlate with reality), $\textit{(ii)}$ consistency (i.e., producing simulated trajectories that are coherent over long horizons), and $\textit{(iii)}$ efficiency (i.e., producing simulated trajectories quickly). We propose WEAVER (World Estimation Across Views for Embodied Reasoning): a WM architecture that simultaneously achieves all three desiderata, providing state-of-the-art results on robotic manipulation tasks. WEAVER is a multi-view WM trained to predict future latents and reward values via a flow-matching loss. We distill the key design decisions across model architecture, memory, and prediction objectives required to unlock the kinds of long-horizon dynamic manipulation tasks that have confounded prior world modeling approaches. We apply WEAVER in robotic hardware, demonstrating its effectiveness at policy evaluation ($\rho$=0.870 correlation with real-world success rate), policy improvement (real-world success rate improvement of $38\%$ on top of the $\pi_{0.5}$ robot foundation model), and test-time planning (real-world success rate improvement of $14\%$ with a $5-10\times$ speedup over prior WMs). WEAVER also demonstrates better performance than prior WMs when evaluated on out-of-distribution scenarios. Code, models, and videos at: https://arnavkj1995.github.io/WEAVER/ .

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI