日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

世界モデルarXiv:2510.12088

一度きりの人生で学ぶ:未誘導探索から確率的環境の記号的世界モデルを推論する

One Life to Learn: Inferring Symbolic World Models for Stochastic Environments from Unguided Exploration

シェア:XThreadsFacebookLINEはてブBluesky

人間の助けなしに一度きりの探索で複雑な確率的環境の遷移をプログラムとして学習するフレームワークOneLifeを提案し、状態ランキングと忠実度で評価した。

詳しい要約

1. どんなもの?

- 記号的世界モデルを executable program として推定する研究 - 環境の遷移ダイナミクスをプログラムとして表現 - 現実的で困難な設定に挑戦 - 複雑かつ stochastic な環境 - agent は『one life』のみ、human guidance なし、hostile な環境を探索 - OneLife フレームワークを提案 - probabilistic programming framework 内で conditionally-activated programmatic laws により世界ダイナミクスをモデル化 - 評価用に Crafter-OO を開発 - Crafter の再実装で、object-oriented な記号的状態と純粋な transition function を公開

2. 先行研究と比べてどこがすごい?

- 先行研究は主にほぼ deterministic な環境を対象 - 豊富な interaction data、単純な mechanics、human guidance を前提 - 本研究はより現実的で困難な設定に取り組む - 複雑で stochastic な環境 - 『one life』のみの探索、human guidance なし - 全 law が予測に寄与する場合のスケーリング課題を回避 - 動的な computation graph により推論・最適化を関連 law のみに routing - 新たな評価プロトコルを導入 - state ranking と state fidelity の二軸で評価

3. 技術・手法の肝は?

- probabilistic programming framework 上で世界ダイナミクスをモデル化 - 各 law は precondition-effect structure を持つ - 関連する世界状態でのみ activate - conditionally-activated programmatic laws の集合として遷移を表現 - 動的な computation graph を形成 - 推論と最適化を関連 law のみに通す - 複雑で階層的な状態に対する全 law 寄与のスケーリング課題を回避 - 疎な rule activation でも stochastic dynamics の学習を可能に

4. どうやって有効だと検証した?

- 新評価プロトコルを導入 - (a) state ranking: もっともらしい未来状態とそうでない状態の識別能力 - (b) state fidelity: 現実に近い未来状態の生成能力 - Crafter-OO 上で framework を開発・評価 - 構造化された object-oriented な記号的状態と純粋な transition function を提供 - 最小限の unguided interaction から主要ダイナミクスを学習 - テストした 23 シナリオ中 16 で強い baseline を上回る - planning 能力も検証 - simulated rollouts が優れた戦略を特定

5. 議論はある?

- 未知の複雑環境に対する programmatic world model の自律構築の基盤を確立 - 限られた unguided interaction 下での学習可能性を示す - 議論の詳細は要旨からは不明 - 失敗ケース、限界、stochastic 性の扱いの詳細は要旨からは不明 - baseline の具体名や比較条件の詳細も要旨からは不明

6. 次に読むべき論文は?

- Crafter(Crafter-OO の元環境) - probabilistic programming framework を用いた symbolic world modeling の先行研究 - program synthesis による world model 学習 - object-oriented symbolic state を用いた環境モデリング - stochastic dynamics 下での planning と simulated rollouts に関する研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zaid Khan, Archiki Prasad, Elias Stengel-Eskin, Jaemin Cho, Mohit Bansal

分類: cs.AI, cs.CL, cs.LG

原文アブストラクト

Symbolic world modeling requires inferring and representing an environment's transitional dynamics as an executable program. Prior work has focused on largely deterministic environments with abundant interaction data, simple mechanics, and human guidance. We address a more realistic and challenging setting, learning in a complex, stochastic environment where the agent has only "one life" to explore a hostile environment without human guidance. We introduce OneLife, a framework that models world dynamics through conditionally-activated programmatic laws within a probabilistic programming framework. Each law operates through a precondition-effect structure, activating in relevant world states. This creates a dynamic computation graph that routes inference and optimization only through relevant laws, avoiding scaling challenges when all laws contribute to predictions about a complex, hierarchical state, and enabling the learning of stochastic dynamics even with sparse rule activation. To evaluate our approach under these demanding constraints, we introduce a new evaluation protocol that measures (a) state ranking, the ability to distinguish plausible future states from implausible ones, and (b) state fidelity, the ability to generate future states that closely resemble reality. We develop and evaluate our framework on Crafter-OO, our reimplementation of the Crafter environment that exposes a structured, object-oriented symbolic state and a pure transition function that operates on that state alone. OneLife can successfully learn key environment dynamics from minimal, unguided interaction, outperforming a strong baseline on 16 out of 23 scenarios tested. We also test OneLife's planning ability, with simulated rollouts successfully identifying superior strategies. Our work establishes a foundation for autonomously constructing programmatic world models of unknown, complex environments.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI