日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2509.00576

GalaxeaオープンワールドデータセットとG0デュアルシステムVLAモデル

Galaxea Open-World Dataset and G0 Dual-System VLA Model

シェア:XThreadsFacebookLINEはてブBluesky

実環境で収集した大規模ロボット行動データセットを構築し、VLMによる計画とVLAによる実行を組み合わせた二重システムモデルG0を3段階学習で訓練した。

詳しい要約

1. どんなもの?

- Galaxea Open-World Dataset と G0 を提案する論文 - Dataset: 実在の人間の生活・作業環境で収集した大規模で多様な robot behaviors の集合 - 一貫した robotic embodiment で収集し、subtask-level の language annotations を付与 - G0: VLM による multimodal planning と VLA による fine-grained execution を組み合わせた dual-system framework - 3段階 curriculum で学習: cross-embodiment pre-training、single-embodiment pre-training、task-specific post-training - tabletop manipulation、few-shot learning、long-horizon mobile manipulation を含む benchmark を提示

2. 先行研究と比べてどこがすごい?

- 先行研究との具体的比較は要旨からは不明 - 主張される特徴: - 実環境で収集した大規模・多様な demonstrations を、一貫した embodiment と subtask-level language annotations 付きで提供 - VLM による planning と VLA による execution を分離した dual-system 構成 - 3段階 curriculum により cross-embodiment から single-embodiment、task-specific へ段階的に適応 - single-embodiment pre-training と本 Dataset の組み合わせが高性能に重要と報告

3. 技術・手法の肝は?

- G0 の dual-system 構成 - VLM: multimodal planning を担当 - VLA: fine-grained execution を担当 - 学習は three-stage curriculum - cross-embodiment pre-training - single-embodiment pre-training - task-specific post-training - Dataset 側の設計 - 同一 robotic embodiment で収集 - subtask-level language annotations を付与し、training と evaluation の両方に利用 - 詳細な architecture・学習条件は要旨からは不明

4. どうやって有効だと検証した?

- tabletop manipulation、few-shot learning、long-horizon mobile manipulation を包含する comprehensive benchmark で評価 - 結果として手法の有効性を報告 - 特に single-embodiment pre-training stage と Galaxea Open-World Dataset が強い性能に critical な役割を果たすことを確認 - 具体的な指標・比較対象・数値は要旨からは不明

5. 議論はある?

- single-embodiment pre-training と Dataset の重要性を強調 - cross-embodiment pre-training の寄与や限界についての詳細は要旨からは不明 - dual-system における VLM と VLA の分担の妥当性、failure cases、汎化性の議論は要旨からは不明 - Dataset の規模・多様性の定量評価や bias については要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない - 関連手法として以下を挙げる - VLA 系: RT-2、OpenVLA、π0 などの Vision-Language-Action models - dual-system 系: System 1/System 2 型の階層的 robot policy - データセット系: Open X-Embodiment、RT-X、BridgeData などの robot demonstration datasets - 学習手法系: cross-embodiment pre-training と curriculum learning に関する研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Tao Jiang, Tianyuan Yuan, Yicheng Liu, Chenhao Lu, Jianning Cui, Xiao Liu, Shuiqi Cheng, Jiyang Gao, Huazhe Xu, Hang Zhao

分類: cs.RO, cs.CV

原文アブストラクト

We present Galaxea Open-World Dataset, a large-scale, diverse collection of robot behaviors recorded in authentic human living and working environments. All demonstrations are gathered using a consistent robotic embodiment, paired with precise subtask-level language annotations to facilitate both training and evaluation. Building on this dataset, we introduce G0, a dual-system framework that couples a Vision-Language Model (VLM) for multimodal planning with a Vision-Language-Action (VLA) model for fine-grained execution. G0 is trained using a three-stage curriculum: cross-embodiment pre-training, single-embodiment pre-training, and task-specific post-training. A comprehensive benchmark spanning tabletop manipulation, few-shot learning, and long-horizon mobile manipulation, demonstrates the effectiveness of our approach. In particular, we find that the single-embodiment pre-training stage, together with the Galaxea Open-World Dataset, plays a critical role in achieving strong performance.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI