日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2511.01224

視覚言語行動モデルのための身体性転移学習

Embodiment Transfer Learning for Vision-Language-Action Models

シェア:XThreadsFacebookLINEはてブBluesky

事前学習済みVLAモデルをマルチロボットに効率的に転移するET-VLAを提案し、合成継続事前学習とEmbodied Graph-of-Thoughtで二腕ロボットの協調タスク性能を向上させた。

詳しい要約

1. どんなもの?

- Vision-language-action (VLA) モデルを multi-robot 環境へ効率的に転移する枠組み ET-VLA の提案 - 中核は Synthetic Continued Pretraining (SCP):合成データで新 embodiment 向けに warm up し、実 human demonstration を不要にする - SCP 後に target embodiment データで fine-tune する二段階構成 - multi-embodiment 性能向上のため Embodied Graph-of-Thought を導入し、各 sub-task を node として embodiment の役割を区別 - bimanual robot を multi-robot の簡易版として検証

2. 先行研究と比べてどこがすごい?

- 従来の autoregressive VLA は multi-robot collaboration が苦手という課題があった - 既存の fine-tuning は対象ロボットの実 human demonstration 収集コストが高い - ET-VLA は合成データによる SCP で実 demonstration を回避し、データ収集コストを削減 - Embodied Graph-of-Thought により multi-embodiment での役割・機能の区別を可能にする点が新しい - 実ロボット6タスクで OpenVLA を 53.2% 以上上回ると報告

3. 技術・手法の肝は?

- Synthetic Continued Pretraining (SCP):合成生成データで新 embodiment に warm up - SCP により正しい action と正確な action token 数を学習させる - SCP 後に target embodiment データで fine-tune - Embodied Graph-of-Thought:各 sub-task を node として表現し、VLA が embodiment ごとの機能・役割を区別できるようにする - bimanual robot を multi-robot の簡易版として適用

4. どうやって有効だと検証した?

- simulation benchmark と実ロボットの両方で有効性を検証 - 3 種類の異なる bimanual embodiment を対象 - 実世界6タスクで OpenVLA に対し 53.2% 以上の性能向上を確認 - 詳細な実験設定・ベースラインは要旨からは不明

5. 議論はある?

- 実 human demonstration 不要化によるデータ収集コスト削減を主張 - multi-robot の簡易版として bimanual robot のみで検証しており、一般の multi-robot への拡張性は要旨からは不明 - SCP の合成データ品質や sim-to-real ギャップへの影響は要旨からは不明 - コードはオープンソース化予定と記載

6. 次に読むべき論文は?

- OpenVLA(比較対象のベースライン) - Vision-language-action (VLA) モデル全般の先行研究 - Synthetic Continued Pretraining (SCP) に関連する合成データ・continued pretraining 手法 - Graph-of-Thought に関連する推論手法 - bimanual robot 学習に関する研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Chengmeng Li, Yaxin Peng

分類: cs.RO

原文アブストラクト

Vision-language-action (VLA) models have significantly advanced robotic learning, enabling training on large-scale, cross-embodiment data and fine-tuning for specific robots. However, state-of-the-art autoregressive VLAs struggle with multi-robot collaboration. We introduce embodiment transfer learning, denoted as ET-VLA, a novel framework for efficient and effective transfer of pre-trained VLAs to multi-robot. ET-VLA's core is Synthetic Continued Pretraining (SCP), which uses synthetically generated data to warm up the model for the new embodiment, bypassing the need for real human demonstrations and reducing data collection costs. SCP enables the model to learn correct actions and precise action token numbers. Following SCP, the model is fine-tuned on target embodiment data. To further enhance the model performance on multi-embodiment, we present the Embodied Graph-of-Thought technique, a novel approach that formulates each sub-task as a node, that allows the VLA model to distinguish the functionalities and roles of each embodiment during task execution. Our work considers bimanual robots, a simple version of multi-robot to verify our approaches. We validate the effectiveness of our method on both simulation benchmarks and real robots covering three different bimanual embodiments. In particular, our proposed ET-VLA \space can outperform OpenVLA on six real-world tasks over 53.2%. We will open-source all codes to support the community in advancing VLA models for robot learning.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI