日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

世界モデルarXiv:2609.23753

OnlineWM: 因果性を考慮した能動的オンライン学習による効果的な世界モデリング

OnlineWM: Causality-Aware Active Online Learning for Effective World Modeling

シェア:XThreadsFacebookLINEはてブBluesky

シミュレータと能動的に対話しながら、モデルの弱点を狙ったデータを収集し、反事実学習で行動と状態遷移の因果関係を捉える世界モデルのオンライン学習フレームワークを提案。

詳しい要約

1. どんなもの?

- 生成的世界モデル(generative world models)のためのオンライン学習フレームワーク - 行動条件付き未来状態予測の精度向上を目的 - アクティブなシミュレータ相互作用と因果性を考慮した最適化を統合 - 閉ループの洗練プロセスでモデルを継続的に改善

2. 先行研究と比べてどこがすごい?

- 従来の静的オフラインデータ収集では、訓練セットとモデルの進化する誤りパターンとの分布不一致が生じ、長尾シナリオに対応できない - 観測誤差最小化の標準目的は、行動効果の因果性ではなく偽相関を利用する傾向があった - OnlineWMはアクティブオンライン学習と因果性対応ファインチューニングでこれらを解決

3. 技術・手法の肝は?

- Active Online Learning: 固定データセットではなく、モデルの現在の予測弱点を狙った新しい相互作用シーケンスをシミュレータに適応的に問い合わせる - Causality-Aware Fine-Tuning: 同一状態からの異なる行動の結果を対比する反事実学習戦略 - 状態遷移を環境の進化ではなく特定の行動に帰属させることで、信頼できる因果メカニズムに基づく予測を実現

4. どうやって有効だと検証した?

- 広範な実験により、OnlineWMが行動制御性を大幅に向上させ、未見ドメインに効果的に一般化することを実証 - 具体的な評価指標やデータセットは要旨からは不明

5. 議論はある?

- 要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない - 同分野の関連手法として、Dreamer、PlaNet、MBPOなどのモデルベース強化学習や世界モデル研究が挙げられる

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yikun Miao, Fangqi Zhu, Quanxin Shou, Xiaoyi Pang, Zhengyang Yan, Junhao Li, Haodong Wang, Zicong Hong, Song Guo

分類: cs.CV, cs.LG

原文アブストラクト

Generative world models aim to predict future states conditioned on actions, where action controllability is fundamental for reliable dynamics modeling. While recent efforts leverage simulator-generated data to enhance this capability, existing training pipelines face two fundamental limitations. First, static offline data collection leads to a distribution misalignment between training sets and the model's evolving error patterns, failing to resolve critical long-tail scenarios where dynamics predictions remain unreliable. Second, the standard objective of minimizing observational discrepancy often encourages the model to exploit spurious correlations instead of capturing the underlying action-effect causality. To address these limitations, we propose OnlineWM, an online training framework that continuously improves world modeling through active simulator interaction and causality-aware optimization. OnlineWM introduces two key innovations: (1) Active Online Learning: Instead of using fixed datasets, OnlineWM adaptively queries the simulator for new interaction sequences that target the model's current predictive weaknesses, ensuring high-utility data acquisition. (2) Causality-Aware Fine-Tuning: We propose a counterfactual learning strategy that contrasts the outcomes of different actions from identical states, forcing the model to attribute state transitions to specific actions rather than ambient environmental evolution, thereby grounding its predictions in reliable causal mechanisms. By integrating active data acquisition with causal optimization, OnlineWM establishes a closed-loop refinement process that ensures the model is both robust to diverse scenarios and precise in its causal attribution. Extensive experiments demonstrate that OnlineWM significantly enhances action controllability and generalizes effectively to unseen domains.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI