日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ワールドモデル/運動計画arXiv:2610.25600

ベクトル量子化ワールドモデル:ロボットマニピュレーションのための潜在フィードバック運動計画

Vector-Quantized World Model: Latent Feedback Motion Planning for Robot Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

ベクトル量子化した潜在状態間の遷移を離散探索で計画し、連続的な視覚フィードバック制御で追従する運動計画フレームワークを提案。ハノイの塔の実機操作で短いデモデータのみから100%の成功率を達成した。

詳しい要約

1. どんなもの?

- ロボット操作のための visual world model ベースの計画フレームワーク VQ-WM を提案する研究。 - 離散的な長期計画と連続的な visual feedback control を統合する latent feedback motion planning 手法。 - vector-quantized latent state 間の遷移を離散 latent predictor でモデル化し、離散探索でゴールまでの最短経路を先読みする。 - 学習済み連続コントローラが visual feedback で計画状態に逐次到達し、ずれを補正する。 - 物理ロボットの Tower of Hanoi パズルと、操作・locomotion の simulation benchmarks で評価。

2. 先行研究と比べてどこがすごい?

- 既存の state-of-the-art foundation models(VLAs, WAMs)は訓練データ中の solution trace がある場合のみ成功するのに対し、本手法は短い short-play data のみで 100% 成功率を達成。 - 短い実演軌跡を超えた長期解の合成と信頼性の高い実行を示す。 - 最強の world-models と比較して simulation benchmarks で 13.3–85.3 percentage points 上回る。 - 離散探索と連続制御を組み合わせ、compounding prediction errors と search complexity の課題に対処する点が新しい。

3. 技術・手法の肝は?

- 離散 latent predictor が vector-quantized latent states 間の遷移をモデル化し、planner が離散探索で長期先読みして最短経路を求める。 - 連続 learned controller が visual feedback により計画状態へ逐次到達し、deviation を補正して compounding errors を緩和。 - vector quantization の距離尺度に Euclidean distance ではなく、first-passage-time の新規 estimator を quasi-metric として使用。 - これにより planning abstraction を controller の到達能力に整合させる。

4. どうやって有効だと検証した?

- 物理ロボットによる Tower of Hanoi パズル操作で評価。 - 既存 foundation models(VLAs, WAMs)は solution trace が訓練データにある場合のみ成功するのに対し、short-play data のみで 100% 成功率を達成。 - 操作と locomotion を含む simulation benchmarks で、最強の world-models より 13.3–85.3 percentage points 高い性能を確認。

5. 議論はある?

- 要旨からは不明(具体的な限界や失敗事例、計算コスト、スケーラビリティに関する議論は記述されていない)。 - 離散探索と連続制御の統合、first-passage-time quasi-metric の有効性が主張の中心。

6. 次に読むべき論文は?

- VLAs(Vision-Language-Action models) - WAMs(World-Action Models) - 比較対象となった strongest world-models - vector quantization を用いた latent planning 関連研究 - visual world models による robot planning の先行研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xuezhou Xu, Chung-Pang Wang, Zhenzhen Li, Benjamin Riviere

分類: cs.RO

原文アブストラクト

Visual world models have shown strong potential for robot planning, yet long-horizon manipulation remains challenging due to compounding prediction errors, large search complexity, and latent plans that the low-level controller cannot reliably reach. In this work, we introduce Vector-Quantized World Model (VQ-WM), a latent feedback motion planning framework that integrates discrete long-horizon search with continuous visual feedback control: a discrete latent predictor models transitions between vector-quantized latent states, allowing the planner to look far ahead and find a shortest path to the goal through discrete search and a continuous learned controller sequentially reaches the planned states through visual feedback, correcting deviations to mitigate compounding errors. Whereas most vector quantization uses Euclidean distance, we use a novel estimator of the first-passage-time as a quasi-metric, which aligns the planning abstraction with the controller's capabilities. We evaluate on the physical robot manipulation of the Tower of Hanoi puzzle: whereas existing state-of-the-art foundation models (VLAs, WAMs) only succeed when the solution trace in their training dataset, our method achieves 100\% success rate with only short-play data, demonstrate its ability to compose long-horizon solutions beyond the short demonstrated trajectories and execute them reliably. Our solution also outperforms strongest world-models by 13.3--85.3 percentage points on simulation benchmarks spanning manipulation and locomotion, demonstrating consistent progress and new capabilities.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI