日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

モデルベース強化学習arXiv:2605.06841

AGWM: 構成的前提条件を持つ環境のためのアフォーダンス基盤世界モデル

AGWM: Affordance-Grounded World Models for Environments with Compositional Prerequisites

シェア:XThreadsFacebookLINEはてブBluesky

行動の実行可能性を左右する前提条件をDAGで明示的に追跡する世界モデルを提案し、多段階予測誤差の低減と解釈性向上を実証した。

詳しい要約

1. どんなもの?

- モデルベース学習における世界モデルの問題を解決するAGWMを提案。 - 従来の世界モデルは状態と行動から次状態を予測するが、行動の前提条件を無視し、相関を因果と誤認する。 - 環境では行動の実行可能性が前提条件の達成・破壊により変化する(structure-changing events, SC events)。 - AGWMは前提依存関係のDAGとして抽象的なaffordance構造を学習し、行動の動的な実行可能性を追跡する。

2. 先行研究と比べてどこがすごい?

- 従来の世界モデルはstationary transition functionを学習し、行動と結果の共起を一般的な因果規則として内部化するため、前提条件を無視する。 - その結果、マルチステップ予測で実行可能性を誤判定し、予測誤差が累積する。 - AGWMはaffordance構造を明示的に学習することで、動的な実行可能性を考慮し、予測誤差の累積を防ぐ。 - ゲームベースのシミュレーション環境で、マルチステップ予測誤差の低減、新規構成への汎化、解釈性の向上を達成。

3. 技術・手法の肝は?

- 前提依存関係を表すDAGとして抽象的なaffordance構造を学習。 - この構造により、各時点での行動の実行可能性を明示的に追跡。 - 実行可能性を考慮した状態表現を用いて世界モデルの予測を行う。 - これにより、マルチステップ予測における誤ったaffordance状態への条件付けを回避。

4. どうやって有効だと検証した?

- ゲームベースのシミュレーション環境で実験。 - マルチステップ予測誤差が低減することを確認。 - 新規構成への汎化性能が向上することを確認。 - 解釈性が向上することを確認。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として、Dreamer、PlaNet、MuZeroなどの一般的な世界モデルが挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Qinshi Zhang, Weipeng Deng, Zhihan Jiang, Jiaming Qu, Qianren Li, Weitao Xu, Ray LC

分類: cs.AI, cs.LG

原文アブストラクト

In model-based learning, the agent learns behaviors by simulating trajectories based on world model predictions. Standard world models typically learn a stationary transition function that maps states and actions to next states, when an action and an outcome frequently co-occur in training data, the model tends to internalize this correlation as a general causal rule while ignoring action preconditions. In interactive environments, however, agent actions can reshape the future affordance space. At each timestep, an action may becomes executable only after its prerequisites are met, or non-executable when they are destroyed. We term such events structure-changing events (SC events). As a result, a conventional world model often fails to determine whether a given action is executable in the current state, especially in multi-step predictions. Each imagined step is conditioned on an incorrect affordance state, and therefore the prediction error compounds over the rollout horizon. In this paper, we propose AGWM (Affordance-Grounded World Model), which learns an abstract affordance structure represented as a DAG of prerequisite dependencies to explicitly track the dynamic executability of actions. Experiments on game-based simulated environments demonstrate the effectiveness of our method by achieving lower multi-step prediction error, better generalization to novel configurations, and improved interpretability.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI