日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

プランニングarXiv:2602.00475

世界モデルのための並列確率的勾配ベースプランニング

Parallel Stochastic Gradient-Based Planning for World Models

シェア:XThreadsFacebookLINEはてブBluesky

学習した世界モデルの微分可能性を活かし、状態を最適化変数として扱う並列化可能な確率的プランナーGRASPを提案。視覚入力からの長期制御タスクで既存手法を上回る。

詳しい要約

1. どんなもの?

- 視覚入力から学習した world model を用いた長期的制御タスクのための計画手法 GRASP を提案。 - 状態を最適化変数(virtual states)として扱い、soft dynamics constraints を課す。 - 並列化可能で、確率的要素を導入して探索を促進。 - 勾配構造を修正し、action-input gradients のみで有効な計画に降下。 - 非凝縮型または collocation-based 最適制御の確率的版と見なせる。

2. 先行研究と比べてどこがすごい?

- 既存の cross-entropy method (CEM) や vanilla gradient-based optimization (GD) と比較して、長期的実験で成功率と収束時間の両方で優れる。 - 従来の計画アルゴリズムは広大で非構造的な探索空間で苦戦するが、GRASP は world model の微分可能性を活かして効率的に最適化。 - 並列計算が容易で、確率性により局所最適を回避しやすい。

3. 技術・手法の肝は?

- world model の微分可能性を利用し、状態を最適化変数(virtual states)として soft dynamics constraints の下で最適化。 - 状態に確率性を導入して探索を促進し、局所最適を回避。 - 高次元視覚ベースの world model における敏感な勾配を緩和するため、勾配構造を修正し、action-input gradients のみを必要とする。 - 非凝縮型または collocation-based 最適制御の確率的バージョンとして定式化。

4. どうやって有効だと検証した?

- ビデオベースの world model を用いた実験で、長期的タスクにおいて CEM や GD よりも成功率と収束時間で優れることを示した。 - 理論的な正当化も提供。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- cross-entropy method (CEM) - vanilla gradient-based optimization (GD) - collocation-based optimal control - non-condensed optimal control

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Michael Psenka, Michael Rabbat, Aditi Krishnapriyan, Yann LeCun, Amir Bar

分類: cs.LG, cs.RO

原文アブストラクト

World models simulate environment dynamics from raw sensory inputs like video. However, using them for planning can be challenging due to the vast and unstructured search space. We propose a robust and highly parallelizable planner that leverages the differentiability of the learned world model for efficient optimization, solving long-horizon control tasks from visual input. Our method treats states as optimization variables ("virtual states") with soft dynamics constraints, enabling parallel computation and easier optimization. To facilitate exploration and avoid local optima, we introduce stochasticity into the states. To mitigate sensitive gradients through high-dimensional vision-based world models, we modify the gradient structure to descend towards valid plans while only requiring action-input gradients. Our planner, which we call GRASP (Gradient RelAxed Stochastic Planner), can be viewed as a stochastic version of a non-condensed or collocation-based optimal controller. We provide theoretical justification and experiments on video-based world models, where our resulting planner outperforms existing planning algorithms like the cross-entropy method (CEM) and vanilla gradient-based optimization (GD) on long-horizon experiments, both in success rate and time to convergence.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI