日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

潜在計画arXiv:2610.26979

潜在計画のための潜在射影

Latent Projection for Latent Planning

シェア:XThreadsFacebookLINEはてブBluesky

世界モデルの正則化が生む潜在空間のノイズを、状態遷移行列の固有基底を用いて不確実性の低い部分空間に射影し、計画コストを改善する手法を提案。

詳しい要約

1. どんなもの?

- latent world model 上で planning を行う際の cost 設計に関する研究 - planner は action sequence を探索し、予測 terminal latent と goal latent の ℓ2 距離を cost とするのが一般的 - latent は部分的に noise を含み、world model 訓練時の regularizer が信号の無い方向の variance を増やす問題がある - この noise を latent 内で除去する構造を同じ regularizer から導出する手法を提案 - 提案名は文脈から latent projection (lp2) と呼称される - encoder, predictor, rollout, planner は変更せず、単一の制約付き行列 A を fit する post hoc 補正

2. 先行研究と比べてどこがすごい?

- 従来の latent planning は terminal latent と goal latent の ℓ2 距離をそのまま cost に用いる - latent の noise 方向が cost を汚染する点は考慮されていない - 提案法は SIGReg が latent marginal を標準 Gaussian に駆動する性質を利用し、noise を pruning する構造を導く - 追加学習や encoder/predictor/planner の変更なしに cost を改善できる点が特徴 - 2D navigation (TwoRoom, PointMaze) で plain ℓ2 cost に対し success rate を最大 +54.7 points 改善 - 6 環境で評価

3. 技術・手法の肝は?

- SIGReg により各 step の latent marginal が標準 Gaussian になることを利用 - latent sequence を Gauss-Markov 過程と仮定すると遷移は線形で、covariance は写像自身で固定: z' | z ~ N(Az, I - AA^T) - 状態 dynamics A を fit することで covariance が追加コストなしに得られる - 固有基底では各 latent 方向が独自の uncertainty を持つ - A を normal matrix に制約すると基底が timestep 間で固定され、任意ステップの uncertainty を一つの固有基底で測れる - この安定基底上で planning cost を計算 - ℓ2 cost を、状態 dynamics が最も uncertainty 小さく forward する k 次元部分空間に制限 - 補正は post hoc で、制約付き行列 A を一つ fit するのみ

4. どうやって有効だと検証した?

- 6 環境で評価 - 2D navigation タスクの TwoRoom と PointMaze で大きな改善 - より難しい planning 設定下で plain ℓ2 cost に対し success rate を最大 +54.7 points 向上 - 具体的な他 4 環境や指標の詳細は要旨からは不明 - code は https://github.com/yjang43/lp2 で公開

5. 議論はある?

- Gauss-Markov 過程および normal matrix 制約という仮定の妥当性や限界は要旨からは不明 - 仮定が破れる場合の性能への影響は議論されていない - k 次元部分空間の次元 k の選び方や感度は要旨からは不明 - 6 環境のうち 2D navigation 以外での改善幅は要旨からは不明 - SIGReg を前提とするため、他の regularizer を用いる world model への一般性は要旨からは不明

6. 次に読むべき論文は?

- SIGReg を提案/使用した world model 研究 (regularizer の原論文) - latent world model を用いた model-based planning の代表的手法 (latent planning / MPC 系) - TwoRoom, PointMaze を用いた latent planning のベースライン研究 - Gauss-Markov 過程や normal matrix 制約を用いた状態空間モデル/線形 dynamics の研究 - ℓ2 cost 以外の planning cost 設計に関する研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yoo Sung Jang, Michael Ryoo

分類: cs.LG, cs.RO

原文アブストラクト

Latent world models let an agent plan in latent space. The planner searches for an action sequence that minimizes a cost, and that cost is often the $\ell_2$ distance between the predicted terminal latent and the goal latent. The latent, however, is partly noise: the regularizer that prevents collapse during world model training promotes variance in the directions carrying no signal. We show that the same regularizer also supplies the structure to prune that noise in the latent. SIGReg drives the latent marginal to a standard Gaussian at every step, and assuming further that the latent sequence is a Gauss-Markov process, the transition is linear with its covariance pinned by the map itself, $z' \mid z \sim \mathcal{N}(Az,\, I - AA^\top)$. Fitting the state dynamics $A$ therefore yields the covariance at no additional cost, and in its eigenbasis each latent direction carries its own uncertainty. Furthermore, constraining $A$ to be a normal matrix fixes that basis across timesteps, so one eigenbasis measures the uncertainty over an arbitrary number of steps and serves as a stable basis to compute the planning cost on. We then restrict the $\ell_2$ cost to the $k$-dimensional subspace the state dynamics carry forward with the least uncertainty. The correction is post hoc: the encoder, the predictor, the rollout, and the planner are all left untouched, and only a single constrained matrix, $A$, is fit. We evaluate across six environments and show large gains on the 2D navigation tasks, TwoRoom and PointMaze, raising success rate over the plain $\ell_2$ cost by up to $+54.7$ points under a harder planning setting. Code is available at https://github.com/yjang43/lp2.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI