日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

世界モデルarXiv:2605.28816

Gamma-World: 2人を超える生成型マルチエージェント世界モデル

Gamma-World: Generative Multi-Agent World Modeling Beyond Two Players

シェア:XThreadsFacebookLINEはてブBluesky

複数エージェントが同時に動作する環境向けの生成型世界モデルを提案し、エージェントの対称性を保つ符号化と効率的な注意機構により、リアルタイムなインタラクティブシミュレーションを実現した。

詳しい要約

1. どんなもの?

- 複数エージェントが同時に行動する共有空間を対象とした、対話型ビデオ生成のための生成的マルチエージェント世界モデル。 - 単一エージェント設定ではなく、複数のプレイヤー・ロボット・身体性エージェントが同時に存在する環境を生成する。 - エージェントは独立に制御可能で、置換対称性を持ち、時間と視点をまたいだ一貫性を保ちつつ効率的な推論を実現することを目指す。

2. 先行研究と比べてどこがすごい?

- 従来の世界モデルは主に単一エージェント設定に焦点を当て、単一の制御信号から未来観測を生成していた。 - 本手法は、学習されたスロットごとのIDや固定されたエージェント順序を必要とせず、エージェントの識別をスケーラブルに扱える。 - slot-based や dense-attention のベースラインと比較して、ビデオ忠実度・行動制御性・エージェント間一貫性を改善。 - 追加学習なしで2人から4人へ一般化できる点が優れている。

3. 技術・手法の肝は?

- Simplex Rotary Agent Encoding: 3D RoPE のパラメータフリー拡張で、エージェントを回転角空間における正単体の頂点として表現。各エージェントに異なる位相を与えつつ、全エージェントを置換等価にする。 - Sparse Hub Attention: 学習可能な hub token がエージェント間のトークン相互作用を仲介し、エージェント間アテンションコストをエージェント数に対して二次から線形に削減。 - リアルタイムロールアウトのため、フルコンテキスト拡散教師を因果的生徒に蒸留し、KV キャッシュを用いて時間ブロックを逐次生成、24 FPS で行動応答生成を可能にする。

4. どうやって有効だと検証した?

- マルチプレイヤー仮想環境での実験により、ビデオ忠実度、行動制御性、エージェント間一貫性が slot-based および dense-attention ベースラインより改善することを示した。 - 追加学習なしで2人から4人への一般化を確認。 - 24 FPS でのリアルタイム生成を実証。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- slot-based ベースライン、dense-attention ベースライン、3D RoPE、拡散モデル蒸留、KV キャッシュを用いた因果的生成に関する研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Fangfu Liu, Kai He, Tianchang Shen, Tianshi Cao, Sanja Fidler, Yueqi Duan, Jun Gao, Igor Gilitschenski, Zian Wang, Xuanchi Ren

分類: cs.CV

原文アブストラクト

World models for interactive video generation have largely focused on single-agent settings, where future observations are generated from a single control signal. However, many generated environments require multi-agent interaction: multiple players, robots, or embodied agents act simultaneously within a shared space. Scaling world models to such settings requires a principled multi-agent design: agents should remain independently controllable, permutation-symmetric, and support efficient inference while maintaining consistency across time and perspectives. In this paper, we present our generative multi-agent world model for interactive simulation. It introduces Simplex Rotary Agent Encoding, a parameter-free extension of 3D RoPE that represents agents as vertices of a regular simplex in rotary angle space. This gives each agent a distinct phase while making all agents permutation-equivalent, enabling scalable agent identity without learned per-slot identities or a fixed agent ordering. To avoid dense all-to-all attention across agents, we further propose Sparse Hub Attention, where learnable hub tokens mediate token interaction across agents, reducing cross-agent attention cost from quadratic to linear in the number of agents. For real-time rollout, we distill a full-context diffusion teacher into a causal student that generates temporal blocks sequentially with KV caching, enabling action-responsive generation at 24 FPS. Experiments in multiplayer virtual environments show that our model improves video fidelity, action controllability, and inter-agent consistency over slot-based and dense-attention baselines, while generalizing from two to four players without additional training.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI