マルチエージェントデモから暗黙の因果世界モデルを学習する
Learning Implicit Causal World Models from Multi-Agent Demonstrations
オフラインデモから因果構造を事前定義せずに環境ダイナミクスを復元する暗黙的因果世界モデルを提案し、協調タスクで解釈可能な因果表現を実証した。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Jasorsi Ghosh
分類: cs.LG, cs.MA, cs.RO
原文アブストラクト
In model-based reinforcement learning, world models exist as internal simulators, but their training often conflates statistical correlations with causal mechanisms. This problem is exacerbated in multi-agent systems where physical transitions are intertwined with strategic agent intents, causing world models to fail under distribution shift. We introduce Implicit Causal World Models to recover environmental dynamics from offline demonstrations without requiring pre-defined causal graphs. By incorporating policy variance, we render world models discoverable via the sequential backdoor condition. Evaluations across coordination tasks (Two-Door, Navigation, and Giveway) demonstrate that these models provide interpretable causal representations under both full and partial observability, with model accuracy scaling directly with interventional strength.
関連論文
- 安全フィルタを蒸留したフィルタ不要のマルチエージェント強化学習マルチエージェント強化学習
- 協調の戦略を意味的に忘却する:マルチエージェント強化学習における役割不変な慣習の除去マルチエージェント強化学習
- GARDEN: 証拠ナビゲーションによる汎用自律報酬設計マルチエージェント強化学習
- サポート保持蒸留によるマルチエージェント協調マルチエージェント強化学習
- 未来の協力者と協調する:参加タイミングがずれるマルチエージェント強化学習マルチエージェント強化学習
- 部分的観測動的ゲームにおける未知の対戦相手に対するレベルK政策の編成マルチエージェント強化学習
