日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2606.09009

多様な経験によるスケーリング:視覚言語行動モデルのための手法

Scaling by Diversified Experience for Vision-Language-Action Models

シェア:XThreadsFacebookLINEはてブBluesky

視覚言語行動モデルの実世界展開における課題を解決するため、意図分離アルゴリズムと類似サンプル誘導型強化学習を導入し、ロボットタスクとマルチモーダルベンチマークで優れた性能を達成した。

詳しい要約

1. どんなもの?

- 本論文は、Vision-Language-Actionモデル(VLA)の実世界展開における課題に対処するため、多様な経験で訓練されたロボットモデル「SyVLA」を提案している。 - 高レベル推論と低レベル制御の絡み合い、およびポリシー最適化の不安定性という問題を解決することを目的としている。 - 実世界のロボットタスクとマルチモーダルベンチマークで評価され、既存手法と比較して優れたタスク成功率と分布外汎化性能を示し、視覚言語能力も維持している。

2. 先行研究と比べてどこがすごい?

- 既存のVLAモデルと比較して、SyVLAは高レベル推論と低レベル制御の分離を実現し、ポリシー最適化の安定性を向上させている。 - 実世界タスクとマルチモーダルベンチマークにおいて、タスク成功率と分布外汎化性能が既存手法より優れている。 - 視覚言語能力を効果的に保持している点も先行研究と比べて優れている。

3. 技術・手法の肝は?

- Intention Decouplingアルゴリズムを提案し、推論コンテキストから制御に関連する特徴を分離する。 - 類似サンプルガイド付き強化学習(RL)パイプラインを導入し、ポリシー更新を安定化させ、分布シフトを軽減する。 - これらの手法により、多様な経験を用いた訓練を可能にしている。

4. どうやって有効だと検証した?

- 実世界のロボットタスクとマルチモーダルベンチマークで広範な実験を実施。 - タスク成功率と分布外汎化性能を既存手法と比較評価。 - 視覚言語能力の保持も検証している。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。関連手法として、Vision-Language-Actionモデル(VLA)、強化学習(RL)を用いたロボット制御、マルチモーダルベンチマークに関する研究が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Leiyu Wang, Zhaofengnian Wang, Xueqi Li, Luoyi Fan, Cewu Lu, Nanyang Ye

分類: cs.CV

原文アブストラクト

Vision-Language-Action models face significant challenges in real-world deployment due to the entanglement of high-level reasoning with low-level control, and the instability of policy optimization. In this paper, we introduce SyVLA, a robust VLA model trained with diversified experiences. We propose an Intention Decoupling algorithm to isolate control-relevant features from reasoning contexts and a similar-sample guided RL pipeline to stabilize policy updates and mitigate distribution shift. Extensive experiments on real-world robotic tasks and multi-modal benchmarks demonstrate that SyVLA achieves superior task success rates and stronger out-of-distribution generalization compared to existing methods, while effectively preserving core vision-language capabilities. Codes and Datasets is released on \href{https://sy-vla.github.io/}{project page}.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI