日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2509.22643

VLA-Reasoner: オンラインMCTSによる推論で視覚言語行動モデルを強化

VLA-Reasoner: Empowering Vision-Language-Action Models with Reasoning via Online Monte Carlo Tree Search

シェア:XThreadsFacebookLINEはてブBluesky

VLAモデルにテスト時スケーリングを適用し、ワールドモデルとMCTSで将来状態を予測・探索することで長期的な操作タスクの性能を向上させるプラグイン手法を提案。

詳しい要約

1. どんなもの?

- 既存の Vision-Language-Action models (VLAs) を拡張する plug-in framework「VLA-Reasoner」 - off-the-shelf の VLA をそのまま利用 - test-time scaling により将来状態を先読みする能力を付与 - 対象は長い horizon の軌道タスク - 既存 VLA の short-sighted な next-action 予測による incremental deviation を緩和 - シミュレータと実世界の両方で評価された研究

2. 先行研究と比べてどこがすごい?

- 既存 VLAs は imitation learning の scaling で一般 manipulation に強いが、next-action を短視的に予測するため long-horizon で誤差が蓄積 - VLA-Reasoner は test-time scaling により将来状態を foresee し、行動探索を行う点が異なる - 大規模 action space での探索効率を MCTS で改善 - KDE ベースの confidence sampling で冗長な VLA クエリを抑制 - 実験で state-of-the-art VLAs を有意に上回ったと報告

3. 技術・手法の肝は?

- 可能な action trajectory をサンプル・rollout し、各 action を rationale として world model で将来状態を生成 - 将来結果を foresee・reason して最適 action を探索 - Monte Carlo Tree Search (MCTS) を導入し、step-wise な VLA 予測を root として探索 - Kernel Density Estimation (KDE) に基づく confidence sampling で MCTS の効率的探索を実現 - MCTS 内の中間状態を offline value estimation で評価し、長期フィードバックで偏差を補正

4. どうやって有効だと検証した?

- シミュレータと実世界の両方で広範な実験を実施 - 提案手法 VLA-Reasoner が state-of-the-art VLAs に対し有意な改善を達成したと報告 - 詳細な実験設定・指標・比較対象は要旨からは不明

5. 議論はある?

- ロボット manipulation におけるスケーラブルな test-time computation への道筋を示唆 - 長期的フィードバックによる偏差補正の有効性を主張 - 限界・失敗事例・計算コストの詳細な議論は要旨からは不明

6. 次に読むべき論文は?

- 比較対象である state-of-the-art VLAs(具体的名称は要旨からは不明) - world model を用いた model-based planning 関連研究 - Monte Carlo Tree Search (MCTS) を用いた行動計画研究 - Kernel Density Estimation (KDE) を用いた探索手法 - offline value estimation に関する研究 - test-time scaling による推論時計算拡張の関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Wenkai Guo, Guanxing Lu, Haoyuan Deng, Zhenyu Wu, Yansong Tang, Ziwei Wang

分類: cs.RO

原文アブストラクト

Vision-Language-Action models (VLAs) achieve strong performance in general robotic manipulation tasks by scaling imitation learning. However, existing VLAs are limited to predicting short-sighted next-action, which struggle with long-horizon trajectory tasks due to incremental deviations. To address this problem, we propose a plug-in framework named \method that effectively empowers off-the-shelf VLAs with the capability of foreseeing future states via test-time scaling. Specifically, \method samples and rolls out possible action trajectories where involved actions are rationales to generate future states via a world model, which enables \method to foresee and reason potential outcomes and search for the optimal actions. We further leverage Monte Carlo Tree Search (MCTS) to improve search efficiency in large action spaces, where step-wise VLA predictions seed the root. Meanwhile, we introduce a confidence sampling mechanism based on Kernel Density Estimation (KDE), to enable efficient exploration in MCTS without redundant VLA queries. We evaluate intermediate states in MCTS via an offline value estimation strategy, to score predicted futures and correct deviations with long-term feedback. We conducted extensive experiments in both simulators and the real world, demonstrating that our proposed VLA-Reasoner achieves significant improvements over the state-of-the-art VLAs. Our method highlights a potential pathway toward scalable test-time computation of robotic manipulation. The project website is available at: https://vla-reasoner.github.io/.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI