日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2512.14666

EVOLVE-VLA: 環境フィードバックによるテスト時訓練で視覚言語行動モデルを適応させる

EVOLVE-VLA: Test-Time Training from Environment Feedback for Vision-Language-Action Models

シェア:XThreadsFacebookLINEはてブBluesky

テスト時に環境との相互作用から学習し、ノイズの多い進捗推定を平滑化して方策を進化的に改善するVLA向けテスト時訓練フレームワークを提案。

詳しい要約

1. どんなもの?

- Vision-Language-Action (VLA) モデルを対象とした test-time training フレームワーク EVOLVE-VLA の提案。 - 環境との相互作用を通じて、タスク固有の demonstration を最小限またはゼロで継続的に適応させることを目指す。 - 静的な模倣ではなく、実践を通じた自己改善を可能にする embodied intelligence への一歩。

2. 先行研究と比べてどこがすごい?

- 従来の VLA は Supervised Finetuning (SFT) に依存し、タスクごとに数百の demonstration を必要とし、trajectory を固定的に記憶し、deployment 条件の変化に適応できない。 - EVOLVE-VLA は test 時に oracle reward を使わず、環境フィードバックから自律的に適応する点が新しい。 - 結果として long-horizon タスクで +8.6%、1-shot learning で +22.0%、未見タスクで 20.8% 成功(pure SFT は 0%)を達成。

3. 技術・手法の肝は?

- oracle reward の代替として、学習された progress estimator により dense feedback を生成。 - ノイズの多い信号を「tame」するため、(1) accumulative progress estimation で点ごとの推定を平滑化、(2) progressive horizon extension で方策を段階的に進化させる。 - これにより test-time の環境相互作用から継続的に方策を更新する。

4. どうやって有効だと検証した?

- long-horizon タスクで +8.6%、1-shot learning で +22.0% の改善を報告。 - タスク固有 demonstration なしの未見タスクで 20.8% 成功(pure SFT は 0%)を示し、cross-task generalization を検証。 - 定性分析で error recovery や新規戦略など demonstration にない創発能力を確認。

5. 議論はある?

- progress estimator に由来する本質的にノイズの多い信号を扱う点が中心的課題であり、平滑化と horizon 拡張で対処している。 - 未見タスクでの成功は 20.8% に留まり、限界も示唆される。 - 具体的な失敗要因や限界の詳細は要旨からは不明。

6. 次に読むべき論文は?

- 比較対象として明示される Supervised Finetuning (SFT) ベースの VLA 研究。 - 関連手法として test-time training、progress estimation、dense reward / reward modeling を用いるロボティクス研究。 - 基盤として Vision-Language-Action (VLA) モデルおよび large language models を活用した manipulation 研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zechen Bai, Chen Gao, Mike Zheng Shou

分類: cs.RO, cs.CV

原文アブストラクト

Achieving truly adaptive embodied intelligence requires agents that learn not just by imitating static demonstrations, but by continuously improving through environmental interaction, which is akin to how humans master skills through practice. Vision-Language-Action (VLA) models have advanced robotic manipulation by leveraging large language models, yet remain fundamentally limited by Supervised Finetuning (SFT): requiring hundreds of demonstrations per task, rigidly memorizing trajectories, and failing to adapt when deployment conditions deviate from training. We introduce EVOLVE-VLA, a test-time training framework enabling VLAs to continuously adapt through environment interaction with minimal or zero task-specific demonstrations. The key technical challenge is replacing oracle reward signals (unavailable at test time) with autonomous feedback. We address this through a learned progress estimator providing dense feedback, and critically, we design our framework to ``tame'' this inherently noisy signal via two mechanisms: (1) an accumulative progress estimation mechanism smoothing noisy point-wise estimates, and (2) a progressive horizon extension strategy enabling gradual policy evolution. EVOLVE-VLA achieves substantial gains: +8.6\% on long-horizon tasks, +22.0\% in 1-shot learning, and enables cross-task generalization -- achieving 20.8\% success on unseen tasks without task-specific demonstrations training (vs. 0\% for pure SFT). Qualitative analysis reveals emergent capabilities absent in demonstrations, including error recovery and novel strategies. This work represents a critical step toward VLAs that truly learn and adapt, moving beyond static imitation toward continuous self-improvements.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI