日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2511.19861

GigaWorld-0:世界モデルをデータエンジンとして具現化AIを強化

GigaWorld-0: World Models as Data Engine to Empower Embodied AI

シェア:XThreadsFacebookLINEはてブBluesky

視覚・言語・行動(VLA)学習のためのデータ生成エンジンとして、動画生成と3D生成を統合した世界モデルフレームワークを提案し、実世界データなしでロボットの汎化性能とタスク成功率を向上させた。

詳しい要約

1. どんなもの?

- 本論文は GigaWorld-0 を提案する。 - 目的は scalable で data-efficient な embodied AI のための world model を data engine として使うこと。 - 対象は Vision-Language-Action (VLA) 学習向けの合成データ生成。 - 構成は2つの synergistic なコンポーネント。 - GigaWorld-0-Video: 大規模 video generation により、appearance・camera viewpoint・action semantics を fine-grained に制御した embodied sequence を生成。 - GigaWorld-0-3D: 3D generative modeling、3D Gaussian Splatting reconstruction、physically differentiable system identification、executable motion planning を組み合わせ、geome…

2. 先行研究と比べてどこがすごい?

- 要旨からは個々の先行研究との具体的比較は不明。 - 主張される差分は以下の統合性にある。 - video generation による多様で texture-rich・temporally coherent な系列生成と、3D 側の geometric consistency・physical realism を単一フレームワークで統合。 - appearance・camera viewpoint・action semantics の fine-grained control を掲げる点。 - GigaTrain により FP8-precision と sparse attention を用い、大規模学習の memory・compute を大幅削減。 - 生成データのみで学習した VLA が実ロボットで generalization と task success を改善したと報告。

3. 技術・手法の肝は?

- 中核は2コンポーネントの joint optimization。 - GigaWorld-0-Video: 大規模 video generation で embodied sequence を生成し、appearance・camera viewpoint・action semantics を制御。 - GigaWorld-0-3D: 3D generative modeling と 3D Gaussian Splatting reconstruction で幾何整合を確保。 - physically differentiable system identification で物理的妥当性を担保。 - executable motion planning を組み込む。 - 学習基盤は GigaTrain。 - FP8-precision と sparse attention を活用し、memory と compute を削減。 - 出力は instruction-aligned な embodied interaction data として VLA 学習に…

4. どうやって有効だと検証した?

- 多次元での comprehensive evaluations を実施。 - 生成データが high-quality・diverse・controllable であることを確認。 - 下流検証として VLA model(例: GigaBrain-0)を GigaWorld-0 生成データで学習。 - 実ロボット上で strong real-world performance を達成。 - 学習中に real-world interaction を一切行わずに generalization と task success が有意に改善したと報告。 - 具体的な評価指標・ベンチマーク・被験タスクの詳細は要旨からは不明。

5. 議論はある?

- 要旨からは明示的な limitation や議論の記述は不明。 - 提示される含意は以下。 - world model を data engine とすることで、実世界インタラクションなしに VLA の generalization と成功率を高められる可能性。 - video 生成と 3D・物理・planning の統合が、視覚的説得力と空間・物理的妥当性の両立に寄与するという主張。 - 一方、生成データの物理的忠実度や sim-to-real ギャップ、評価範囲の一般性については要旨からは不明。

6. 次に読むべき論文は?

- 要旨で直接参照・比較されている研究は明示されていない。 - 関連して読むべき候補として以下が挙げられる。 - GigaBrain-0(本手法の生成データで学習された VLA model として言及)。 - Vision-Language-Action (VLA) 学習の代表的手法。 - 大規模 video generation に基づく world model。 - 3D Gaussian Splatting を用いた reconstruction/3D generative modeling。 - physically differentiable system identification と motion planning を統合した embodied データ生成。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: GigaWorld Team, Angen Ye, Boyuan Wang, Chaojun Ni, Guan Huang, Guosheng Zhao, Haoyun Li, Jiagang Zhu, Kerui Li, Mengyuan Xu, Qiuping Deng, Siting Wang, Wenkang Qin, Xinze Chen, Xiaofeng Wang, Yankai Wang, Yu Cao, Yifan Chang, Yuan Xu, Yun Ye, Yang Wang, Yukun Zhou, Zhengyuan Zhang, Zhehao Dong, Zheng Zhu

分類: cs.CV, cs.RO

原文アブストラクト

World models are emerging as a foundational paradigm for scalable, data-efficient embodied AI. In this work, we present GigaWorld-0, a unified world model framework designed explicitly as a data engine for Vision-Language-Action (VLA) learning. GigaWorld-0 integrates two synergistic components: GigaWorld-0-Video, which leverages large-scale video generation to produce diverse, texture-rich, and temporally coherent embodied sequences under fine-grained control of appearance, camera viewpoint, and action semantics; and GigaWorld-0-3D, which combines 3D generative modeling, 3D Gaussian Splatting reconstruction, physically differentiable system identification, and executable motion planning to ensure geometric consistency and physical realism. Their joint optimization enables the scalable synthesis of embodied interaction data that is visually compelling, spatially coherent, physically plausible, and instruction-aligned. Training at scale is made feasible through our efficient GigaTrain framework, which exploits FP8-precision and sparse attention to drastically reduce memory and compute requirements. We conduct comprehensive evaluations showing that GigaWorld-0 generates high-quality, diverse, and controllable data across multiple dimensions. Critically, VLA model (e.g., GigaBrain-0) trained on GigaWorld-0-generated data achieve strong real-world performance, significantly improving generalization and task success on physical robots without any real-world interaction during training.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI