日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLA/操作arXiv:2605.11750

DreamAvoid: 臨界期テストタイムドリーミングによるVLAポリシーの失敗回避

DreamAvoid: Critical-Phase Test-Time Dreaming to Avoid Failures in VLA Policies

シェア:XThreadsFacebookLINEはてブBluesky

VLAモデルが微細な操作中に失敗する問題に対し、実行が臨界期に入ったかを検出し、複数の候補行動を評価して最適な行動を選択する「テストタイムドリーミング」フレームワークを提案した。

詳しい要約

1. どんなもの?

- VLAモデルの微細操作における失敗回避を目的としたフレームワーク - 臨界フェーズでのテスト時ドリーミングを提案 - 成功・失敗・境界事例を混合したデータで学習 - 実世界タスクとシミュレーションで評価

2. 先行研究と比べてどこがすごい?

- 既存VLAは成功デモのみで学習し失敗認識が不足 - 臨界フェーズでの失敗予測と回避を明示的に扱う点が新しい - 自律的境界学習で成功と失敗の境界理解を洗練 - テスト時ドリーミングで候補行動の未来を評価

3. 技術・手法の肝は?

- Dream Triggerで臨界フェーズ進入を判定 - Action ProposerでVLAから複数候補行動チャンクをサンプリング - Dream Evaluatorが混合データで学習し、候補行動の短期未来をドリーミング評価 - 最適行動を選択して失敗を回避

4. どうやって有効だと検証した?

- 実世界の操作タスクとシミュレーションベンチマークで広範に評価 - 失敗回避とタスク成功率の向上を実証 - コード公開あり

5. 議論はある?

- 要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない - 同分野の定番としてVLAモデル(例: RT-2, OpenVLA)やテスト時適応手法を挙げる

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xianzhe Fan, Yuxiang Lu, Shenyuan Gao, Xiaoyang Wu, Ruihua Han, Manling Li, Hengshuang Zhao

分類: cs.RO, cs.AI, cs.CL, cs.CV

原文アブストラクト

Vision-Language-Action (VLA) models are often brittle in fine-grained manipulation, where minor action errors during the critical phases can rapidly escalate into irrecoverable failures. Since existing VLA models rely predominantly on successful demonstrations for training, they lack an explicit awareness of failure during these critical phases. To address this, we propose DreamAvoid, a critical-phase test-time dreaming framework that enables VLA models to anticipate and avoid failures. We also introduce an autonomous boundary learning paradigm to refine the system's understanding of the subtle boundary between success and failure. Specifically, we (1) utilize a Dream Trigger to determine whether the execution has entered a critical phase, (2) sample multiple candidate action chunks from the VLA via an Action Proposer, and (3) employ a Dream Evaluator, jointly trained on mixed data (success, failure, and boundary cases), to "dream" the short-horizon futures corresponding to the candidate actions, evaluate their values, and select the optimal action. We conduct extensive evaluations on real-world manipulation tasks and simulation benchmarks. The results demonstrate that DreamAvoid can effectively avoid failures, thereby improving the overall task success rate. Our code is available at https://github.com/XianzheFan/DreamAvoid.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI