日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2510.04041

SITCOM: VLAのための推論時計算スケーリング

SITCOM: Scaling Inference-Time COMpute for VLAs

シェア:XThreadsFacebookLINEはてブBluesky

事前学習済みVLAに学習済みダイナミクスモデルによる多段階ロールアウトと報酬ベースの軌道選択を組み合わせ、長期的な計画能力を強化するフレームワークを提案。SIMPLER環境でタスク完了率を48%から72%に改善した。

詳しい要約

1. どんなもの?

- どんなもの? - 任意の pretrained VLA を拡張する推論時計算スケーリングのフレームワーク SITCOM - Model Predictive Control に着想を得て、model-based rollouts と reward-based trajectory selection を組み込む - 学習済み dynamics model で多段 action rollouts をシミュレートし、最良候補 plan を実世界実行用に選択 - one-shot な VLA を長い horizon の planner に変換することを狙う

2. 先行研究と比べてどこがすごい?

- 先行研究と比べてどこがすごい? - VLA は自然言語指示を single-step control command に接地できるが、lookahead 機構を欠き動的タスクで compounding errors に弱い - SITCOM は pretrained VLA を再学習せず推論時 compute の拡張で長 horizon 計画を付与 - model-based rollouts と reward による候補選択を組み合わせる点が特徴 - 具体的な既存手法との定量比較は要旨からは不明

3. 技術・手法の肝は?

- 技術や手法の肝はどこ? - 学習済み dynamics model による multi-step action rollouts のシミュレーション - simulator 由来の reward で候補 rollouts をスコアリングし最良 plan を選択 - transformer-based dynamics model を大規模 BridgeV2 データで学習し SIMPLER 環境で fine-tune して Real2Sim gap を橋渡し - Model Predictive Control 風の枠組みで one-shot VLA を長 horizon planner 化

4. どうやって有効だと検証した?

- どうやって有効だと検証した? - SIMPLER 環境で複数タスク・複数設定の comprehensive evaluation を実施 - 良い reward function と組み合わせた際、学習済み dynamics model を用いて task completion rate が 48% から 72% へ大幅改善 - 上記以外の詳細な実験条件は要旨からは不明

5. 議論はある?

- 議論はある? - 性能改善は良い reward function に依存すると明記 - dynamics model の Real2Sim gap への対処が課題として示唆 - 実世界での評価や計算コスト、他環境への汎化については要旨からは不明

6. 次に読むべき論文は?

- 次に読むべき論文は? - Model Predictive Control 関連の planning 研究 - VLA モデル(例: 一般的な Vision-Language-Action 研究) - BridgeV2 データセットを用いた dynamics model 研究 - SIMPLER 環境のベンチマーク論文 - model-based rollouts と reward-based trajectory selection を用いる推論時計画手法

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ayudh Saxena, Harsh Shah, Sandeep Routray, Rishi Rajesh Shah, Esha Pahwa

分類: cs.RO

原文アブストラクト

Learning robust robotic control policies remains a major challenge due to the high cost of collecting labeled data, limited generalization to unseen environments, and difficulties in planning over long horizons. While Vision-Language-Action (VLA) models offer a promising solution by grounding natural language instructions into single-step control commands, they often lack mechanisms for lookahead and struggle with compounding errors in dynamic tasks. In this project, we introduce Scaling Inference-Time COMpute for VLAs (SITCOM), a framework that augments any pretrained VLA with model-based rollouts and reward-based trajectory selection, inspired by Model Predictive Control algorithm. SITCOM leverages a learned dynamics model to simulate multi-step action rollouts to select the best candidate plan for real-world execution, transforming one-shot VLAs into robust long-horizon planners. We develop an efficient transformer-based dynamics model trained on large-scale BridgeV2 data and fine-tuned on SIMPLER environments to bridge the Real2Sim gap, and score candidate rollouts using rewards from simulator. Through comprehensive evaluation across multiple tasks and settings in the SIMPLER environment, we demonstrate that SITCOM when combined with a good reward function can significantly improve task completion rate from 48% to 72% using trained dynamics model.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI