日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLA/不確実性推定arXiv:2606.20754

摂動に基づく不確実性による視覚言語行動モデルの故障検出

Perturbation-Based Uncertainty for Failure Detection in Vision-Language-Action Models

シェア:XThreadsFacebookLINEはてブBluesky

視覚言語行動モデルに対し、隠れ活性化への摂動注入による不確実性推定を提案し、分布シフト下での故障検出性能を向上させた。

詳しい要約

1. どんなもの?

Vision-Language-Action (VLA) モデルにおける推論時の不確実性推定フレームワーク。連続行動生成を行う VLA に対し、隠れ活性化へ Gaussian 摂動を注入し、摂動間の行動予測の不一致から epistemic 信号を推定する。ラベル不要・モデル非依存で、分布シフト下の失敗検出を改善する。

2. 先行研究と比べてどこがすごい?

既存手法は stochastic action sampling や supervised failure labels に依存し、多様な pretrained VLA に適用しにくい。提案法は label-free かつ model-agnostic で、明示的な予測確率が得られない regression/flow-based 生成にも対応。LIBERO と LIBERO-PRO で sampling-based uncertainty より一貫して失敗検出を改善。

3. 技術・手法の肝は?

Bayesian 的な局所モデル変動の観点から、transformer の hidden activations に Gaussian perturbations を注入。複数の perturbed action predictions 間の disagreement を epistemic 信号として推定。推論時のみで動作し、追加学習や失敗ラベルを必要としない。

4. どうやって有効だと検証した?

LIBERO および LIBERO-PRO での実験により、分布シフト下での失敗検出性能を評価。perturbation-based uncertainty が sampling-based uncertainty と比較して一貫して改善することを示した。

5. 議論はある?

要旨からは不明。

6. 次に読むべき論文は?

要旨で参照/比較されている sampling-based uncertainty や、VLA モデルの代表例として LIBERO を用いる研究。関連手法として Bayesian 的不確実性推定や flow-based generation を用いた VLA 研究が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yousung Lee, Dongsoo Har

分類: cs.RO

原文アブストラクト

Vision-Language-Action (VLA) models have shown strong performance in robotic manipulation, but reliable uncertainty quantification remains challenging, particularly under distribution shift. Unlike autoregressive policies, many modern VLA models generate continuous actions through regression or flow-based generation, where explicit predictive probabilities are unavailable. Moreover, existing approaches often rely on stochastic action sampling or supervised failure labels, limiting their applicability across diverse pretrained VLA models. In this work, we propose a label-free and model-agnostic framework for inference-time uncertainty estimation through hidden activation perturbations, motivated by Bayesian perspectives on local model variations. Specifically, we inject Gaussian perturbations into transformer hidden activations and estimate epistemic signals from disagreement across perturbed action predictions. Experiments on LIBERO and LIBERO-PRO show that perturbation-based uncertainty consistently improves failure detection under distribution shift compared to sampling-based uncertainty, providing a practical uncertainty signal for VLA models.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI