日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2508.12211

事前学習済みVLAポリシーをモデルベース探索で改善するVLAPS

Improving Pre-Trained Vision-Language-Action Policies with Model-Based Search

シェア:XThreadsFacebookLINEはてブBluesky

事前学習済みVLAポリシーの行動事前分布でMCTSをバイアスし、言語条件付きロボットタスクの成功率を高める推論フレームワークを提案。

詳しい要約

1. どんなもの?

- 事前学習済みの vision-language-action (VLA) モデルの推論手続きに model-based search を組み込む枠組み VLAPS (Vision-Language-Action Planning & Search) を提案する研究。 - 対象環境のモデル上で動かす modified Monte Carlo Tree Search (MCTS) を、VLA 方策が与える action prior でバイアスする。 - 言語条件付きロボットタスクの zero-shot 展開における脆い挙動や不安全な失敗の改善を狙う。

2. 先行研究と比べてどこがすごい?

- VLA 方策の行動予測をそのまま追従する VLA-only baseline と比較し、全実験で有意に上回ると報告。 - 言語指定タスクで成功率を最大 67 percentage points 向上。 - uninformed search では扱いきれないほど探索空間が大きいタスクでも、VLA 由来の abstraction と prior により効率的に探索できる点が従来との違い。

3. 技術・手法の肝は?

- 目標環境のモデル上で modified Monte Carlo Tree Search (MCTS) を実行する。 - VLA 方策が定義する action prior で MCTS をバイアスし、探索を誘導する。 - VLA 由来の abstraction と prior を model-based search に用いることで、言語条件付きタスクの巨大な探索空間を効率的に扱う。 - model-based search を VLA の推論手続きに統合することで、VLA の予測を直接追うより高性能な挙動を得る。

4. どうやって有効だと検証した?

- 言語指定タスク上で VLAPS と VLA-only baseline を比較する実験を実施。 - 全実験で VLAPS が VLA-only baseline を有意に上回り、成功率を最大 67 percentage points 改善したと報告。 - 具体的なタスク・環境・評価指標の詳細は要旨からは不明。

5. 議論はある?

- VLAPS は i) VLA モデルの test-time compute の制御、ii) ロボット環境に関する a priori knowledge の活用、iii) 確立された planning および reinforcement learning 手法の VLA 推論過程への統合、を原理的に可能にする枠組みと位置づけられている。 - 限界や失敗事例、計算コストの詳細な議論は要旨からは不明。

6. 次に読むべき論文は?

- 比較対象である VLA-only baseline に対応する事前学習済み VLA モデル(要旨では個別名の記載なし)。 - ベースラインとして用いられた modified Monte Carlo Tree Search (MCTS) および uninformed search に関する研究。 - VLA 推論への planning / reinforcement learning 統合に関する関連手法(要旨で個別論文の参照はなし)。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Cyrus Neary, Omar G. Younis, Artur Kuramshin, Ozgur Aslan, Glen Berseth

分類: cs.RO, cs.AI

原文アブストラクト

Pre-trained vision-language-action (VLA) models offer a promising foundation for generalist robot policies, but often produce brittle behaviors or unsafe failures when deployed zero-shot in out-of-distribution scenarios. We present Vision-Language-Action Planning & Search (VLAPS) -- a novel framework and accompanying algorithms that embed model-based search into the inference procedure of pre-trained VLA policies to improve their performance on robotic tasks. Specifically, our method biases a modified Monte Carlo Tree Search (MCTS) algorithm -- run using a model of the target environment -- using action priors defined by the VLA policy. By using VLA-derived abstractions and priors in model-based search, VLAPS efficiently explores language-conditioned robotics tasks whose search spaces would otherwise be intractably large. Conversely, by integrating model-based search with the VLA policy's inference procedure, VLAPS yields behaviors that are more performant than those obtained by directly following the VLA policy's action predictions. VLAPS offers a principled framework to: i) control test-time compute in VLA models, ii) leverage a priori knowledge of the robotic environment, and iii) integrate established planning and reinforcement learning techniques into the VLA inference process. Across all experiments, VLAPS significantly outperforms VLA-only baselines on language-specified tasks that would otherwise be intractable for uninformed search algorithms, increasing success rates by as much as 67 percentage points.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI