日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

プランニングarXiv:2606.20627

言語からの潜在目標予測によるモデルベースプランニング

Latent Goal Prediction from Language for Model-Based Planning

シェア:XThreadsFacebookLINEはてブBluesky

言語指示から中間目標状態の系列を予測し、同じ潜在空間で行動条件付きロールアウトを行うことで、長期的なプランニングを可能にするフレームワークLAGOを提案した。

詳しい要約

1. どんなもの?

- 言語指示から潜在空間で中間目標状態を予測する枠組み LAGO を提案。 - world model に基づく planning の誤差蓄積と目標定義の難しさに対処。 - 言語指示と action-conditioned rollouts から潜在 subgoal 列を予測。 - 単一の大域目的ではなく、局所的に扱いやすい latent subgoal に動的分解。 - 長い horizon でも一貫した latent trajectory を辿る制御を目指す。

2. 先行研究と比べてどこがすごい?

- 視覚目標は局所勾配は正確だが遠方の誘導が弱い。 - 言語は柔軟だが cross-modal alignment のノイズや大規模生成モデル依存が問題。 - 従来手法は長 horizon で急激に性能劣化する。 - LAGO はその急激な劣化を避け、言語のみで堅牢かつ精密な長 horizon planning を実現。 - 視覚目標の精度と言語誘導の柔軟性を橋渡しする点が新しい。

3. 技術・手法の肝は?

- 言語指示と action-conditioned rollouts から latent subgoal 列を予測。 - 予測はすべて同一の latent space 内で行う。 - 単一の大域目的を最適化せず、明示的に予測した局所的な latent subgoal に分解。 - subgoal をオンラインで更新。 - planning 時に soft minimum trajectory cost を用いることで長 horizon の一貫性を確保。

4. どうやって有効だと検証した?

- 複数の環境と planning horizon で評価。 - 長 horizon において prior 手法の急激な性能劣化を LAGO が回避することを示す。 - 言語のみから堅牢で精密な長 horizon planning を達成することを確認。 - 具体的な環境名・データセット名・指標は要旨からは不明。

5. 議論はある?

- 視覚目標の精度と言語誘導の柔軟性の橋渡しを主張。 - 長 horizon での誤差蓄積と目標定義の難しさへの対処を議論。 - cross-modal alignment のノイズや大規模生成モデル依存の課題に言及。 - 限界・失敗事例・計算コスト・一般化性の詳細は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない。 - 関連手法として model-based planning、world models、latent subgoal prediction、language-conditioned control、cross-modal alignment が挙げられる。 - 同分野の定番として Dreamer、PlaNet、MuZero などの model-based RL 手法が次に読む候補。 - 言語条件付き planning では SayCan、CLIP、RT-2 などが関連する。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Samuel Barbeau, Simon Roy, Giovanni Beltrame, Christian Desrosiers, Nicolas Thome

分類: cs.AI, cs.LG

原文アブストラクト

Planning with world models is bottlenecked by compounding prediction errors and the difficulty of defining optimizable goals. Visual targets provide precise local gradients but poor distant guidance, while language is flexible yet limited by noisy cross-modal alignment or dependence on large generative models unsuited for the high-sampling nature of model-based planning. To address these challenges, we introduce Latent Goal Prediction from Language (LAGO), a framework that predicts both sequences of intermediate goal states from language instructions and action-conditioned rollouts, all within the same latent space. Rather than optimizing toward a single global objective, LAGO dynamically decomposes instructions into explicitly predicted, locally tractable latent subgoals. By updating these subgoals online and using a soft minimum trajectory cost during planning, LAGO enables an agent to follow coherent latent trajectories over long horizons. Evaluation across multiple environments planning horizons shows that LAGO avoids the sharp degradation of prior methods. By achieving robust and precise long-horizon planning purely from language, LAGO bridges the precision of visual goals with the flexibility of text-guided control.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI