日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ワールドモデルarXiv:2510.26433

共進化する潜在行動ワールドモデル

Co-Evolving Latent Action World Models

シェア:XThreadsFacebookLINEはてブBluesky

潜在行動モデルとワールドモデルをウォームアップ段階を介して初めて同時学習させ、相互に進化させる新手法CoLA-Worldを提案した。

詳しい要約

1. どんなもの?

- 与えられた論文の要旨に基づく要約 - pretrained video generation model を latent action で制御可能な world model に適応させる研究 - 従来の two-stage 手法(LAM と world model を別々に学習)ではなく、両者を joint に学習する枠組み CoLA-World を提案 - LAM の forward dynamic model を強力な world model に置き換え、協調的に学習させるパラダイムを初めて実現したと主張

2. 先行研究と比べてどこがすごい?

- 先行研究との比較 - 支配的な two-stage 手法は LAM と world model を別々に学習するため、冗長な学習と co-adaptation の制約があった - 単純な joint 学習は representational collapse を起こしやすく非自明だった - CoLA-World は critical warm-up phase によりこの課題を解決し、joint 学習の synergistic paradigm を初めて成功裡に実現 - 実験で two-stage 手法と同等以上(video simulation quality と downstream visual planning)を達成

3. 技術・手法の肝は?

- 技術・手法の肝 - LAM の forward dynamic model を強力な world model に置き換え、両者を jointly に学習 - from-scratch の LAM と pretrained world model の representation を整合させる critical warm-up phase が核心 - これにより co-evolution cycle を実現: world model が tutor として勾配を提供し高品質な LAM を形成、LAM はより精密で適応的な control interface を world model に提供 - 詳細なアーキテクチャや損失関数は要旨からは不明

4. どうやって有効だと検証した?

- 有効性の検証 - video simulation quality と downstream visual planning の両面で評価 - 先行の two-stage 手法と比較し、同等または上回る性能を報告 - 具体的なデータセット名・ベンチマーク名・指標の数値は要旨からは不明

5. 議論はある?

- 議論・限界 - joint 学習における representational collapse の課題と warm-up phase による解決を主張 - co-evolution cycle の有効性を実験的に示す - 具体的な限界、失敗事例、計算コスト、warm-up の設計感度などは要旨からは不明

6. 次に読むべき論文は?

- 次に読むべき論文 - latent action model (LAM) に関する先行研究 - pretrained video generation model を world model 化する two-stage 手法の代表的研究 - world model を用いた visual planning の関連研究 - 要旨で個別の論文名は参照されていないため、上記は同分野の一般名・手法カテゴリとして挙げる

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yucen Wang, Fengming Zhang, De-Chuan Zhan, Li Zhao, Kaixin Wang, Jiang Bian

分類: cs.LG

原文アブストラクト

Adapting pretrained video generation models into controllable world models via latent actions is a promising step towards creating generalist world models. The dominant paradigm adopts a two-stage approach that trains latent action model (LAM) and the world model separately, resulting in redundant training and limiting their potential for co-adaptation. A conceptually simple and appealing idea is to directly replace the forward dynamic model in LAM with a powerful world model and training them jointly, but it is non-trivial and prone to representational collapse. In this work, we propose CoLA-World, which for the first time successfully realizes this synergistic paradigm, resolving the core challenge in joint learning through a critical warm-up phase that effectively aligns the representations of the from-scratch LAM with the pretrained world model. This unlocks a co-evolution cycle: the world model acts as a knowledgeable tutor, providing gradients to shape a high-quality LAM, while the LAM offers a more precise and adaptable control interface to the world model. Empirically, CoLA-World matches or outperforms prior two-stage methods in both video simulation quality and downstream visual planning, establishing a robust and efficient new paradigm for the field.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI