日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2605.22896

Agentic-VLA: 視覚言語行動モデルの効率的なオンライン適応

Agentic-VLA: Efficient Online Adaptation for Vision-Language-Action Models

シェア:XThreadsFacebookLINEはてブBluesky

VLAモデルのオンライン適応を効率化するエージェント型トレーニングフレームワークを提案し、報酬合成、言語誘導探索、経験メモリにより、LIBEROベンチマークで大幅な性能向上と高速収束を達成した。

詳しい要約

1. どんなもの?

- Vision-Language-Action (VLA) モデルを対象とした、オンライン適応を効率化するエージェント型学習フレームワーク。 - 3つの主要な革新: Adaptive Reward Synthesis、Language-Guided Exploration、Experience Memory。 - 新規環境への汎化と、多数のデモンストレーションを必要とする学習効率の課題に対処。 - LIBERO ベンチマークおよび dual-arm RoboTwin 2.0 ベンチマークで評価。

2. 先行研究と比べてどこがすごい?

- 従来の VLA 学習手法は、新規環境への汎化性能が低く、多数のデモンストレーションを要するため学習効率が悪い。 - Agentic-VLA は、オンライン適応を効率化し、長期的タスクで +12.3%、1-shot 学習で +28.5% の改善を達成。 - タスク固有のデモンストレーションなしで、クロスタスク転移を 0% から 31.2% に向上。 - 既存のオンライン適応手法と比較して、収束速度が 2.4 倍高速。

3. 技術・手法の肝は?

- Adaptive Reward Synthesis: VLA の現在の能力とタスク複雑度に基づき報酬関数を動的に生成・調整し、複雑なタスクを学習可能なサブゴールに分解してカリキュラム学習を実現。 - Language-Guided Exploration: critic モデルが構造化されたガイダンスを提供し、ランダムサンプリングではなく系統的な探索を実施。 - Experience Memory: タスクに関連するポリシー重みを保存・検索し、類似タスクへの適応をウォームスタート。

4. どうやって有効だと検証した?

- LIBERO ベンチマークで評価し、長期的タスクで +12.3%、1-shot 学習で +28.5% の改善を確認。 - タスク固有のデモンストレーションなしで、クロスタスク転移が 0% から 31.2% に向上。 - 既存のオンライン適応手法と比較して、2.4 倍高速な収束を実証。 - dual-arm RoboTwin 2.0 ベンチマーク(ランダム化された Hard 設定を含む)でも優位性を保持。

5. 議論はある?

- 要旨からは、手法の限界や潜在的な問題点についての議論は明記されていない。 - 今後の課題や適用範囲の制約などは要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究: 既存のオンライン適応手法(具体的名称は要旨に記載なし)。 - 関連手法: Vision-Language-Action (VLA) モデル、カリキュラム学習、強化学習における報酬設計、Experience Replay。 - ベンチマーク: LIBERO、RoboTwin 2.0。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ruofan Jin, Zaixi Zhang

分類: cs.RO, cs.AI, cs.LG

原文アブストラクト

Vision-Language-Action (VLA) models have emerged as a promising paradigm for robotic manipulation by leveraging pre-trained vision-language representations. However, current VLA training methods suffer from two critical limitations: poor generalization to novel environments and low training efficiency requiring extensive demonstrations. We introduce Agentic-VLA, an agentic training framework that enables VLAs to efficiently adapt online through three key innovations: (1) Adaptive Reward Synthesis, which dynamically generates and adjusts reward functions based on the VLA's current capabilities and task complexity, decomposing complex tasks into learnable sub-goals for curriculum learning; (2) Language-Guided Exploration, where a critic model provides structured guidance for systematic exploration rather than random sampling; and (3) Experience Memory,which stores and retrieves task-relevant policy weights for warm-starting adaptation to similar tasks. We evaluate Agentic-VLA on the LIBERO benchmark, achieving substantial improvements: +12.3% on long-horizon tasks, +28.5% in 1-shot learning, and enabling cross-task transfer from 0% to 31.2% without task-specific demonstrations. Our framework also demonstrates 2.4x faster convergence compared to existing online adaptation methods. Beyond LIBERO, Agentic-VLA retains its advantage on the dual-arm RoboTwin 2.0 benchmark, including under its randomized Hard setting. These results establish Agentic-VLA as a significant step toward truly adaptive VLA systems capable of continuous learning in deployment.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3Google DeepMind、ロボット向けAIを発表新製品・発表
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI