日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLA/失敗検出arXiv:2605.30834

軌跡の中のかくれんぼ:VLA実行時監視のための失敗シグナル発見

Hide-and-Seek in Trajectories: Discovering Failure Signals for VLA Runtime Monitoring

シェア:XThreadsFacebookLINEはてブBluesky

軌跡レベルのラベルのみから、ステップ単位の注釈なしで失敗を示す行動を特定するフレームワークを提案し、VLAモデルの実行時失敗検出性能を向上させた。

詳しい要約

1. どんなもの?

- VLAモデルの実行時失敗検出フレームワーク「Hide-and-Seek」 - VLAは自然言語指示で多様なタスクを遂行できるが実行失敗が信頼性を損なう - 実行中の失敗検出はembodied systemの堅牢な展開に重要 - 失敗検出をcoarsely supervised learning問題として定式化 - trajectory-levelの粗いラベルのみから失敗信号を局所化する

2. 先行研究と比べてどこがすごい?

- 既存手法は高コストなaction resamplingや外部モデルに依存 - 代替手法はtrajectory-levelラベルを全timestepに均一伝播し局所失敗信号を曖昧化 - 本手法はstep-levelアノテーション不要で時間的に構造化された失敗信号を誘導 - 実用的なaccuracy-timelinessトレードオフをconformal prediction下で実現 - 見た/未見タスク両方に汎化

3. 技術・手法の肝は?

- VLA失敗検出をcoarsely supervised learningとして定式化 - inter-trajectoryとintra-trajectoryのcontrastive objectiveを組み合わせ - 失敗を示唆するactionを局所化 - trajectory-level supervisionのみから時間的に構造化された失敗信号を誘導 - step-levelアノテーションを一切必要としない

4. どうやって有効だと検証した?

- LIBERO、VLABench、実世界ロボットプラットフォームで評価 - OpenVLA、π0、π0.5の3つの代表的VLAポリシーで検証 - マルチタスク失敗検出でstate-of-the-art性能を達成 - conformal prediction下で実用的なaccuracy-timelinessトレードオフを確認 - 見たタスクと未見タスクの両方で良好な汎化を確認

5. 議論はある?

- 要旨からは不明 - 限界や失敗ケース、計算コスト、conformal predictionの詳細な議論は記述されていない

6. 次に読むべき論文は?

- OpenVLA - π0 - π0.5 - LIBERO - VLABench - conformal prediction - contrastive learning - action resamplingを用いた失敗検出

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Seongheon Park, Wendi Li, Changdae Oh, Samuel Yeh, Zsolt Kira, Michael Hagenow, Sharon Li

分類: cs.RO, cs.AI

原文アブストラクト

Vision-Language-Action (VLA) models enable robots to follow natural language instructions and generalize across diverse tasks, but they remain vulnerable to execution failures that compromise reliability in real-world deployment. Detecting such failures during execution is therefore critical for the robust deployment of embodied systems. Existing failure detection methods either rely on expensive action resampling or external models, while alternatives propagate trajectory-level labels uniformly across every timestep, obscuring localized failure signals. In this paper, we propose \textbf{Hide-and-Seek}, a framework that formulates VLA failure detection as a coarsely supervised learning problem. By combining inter-trajectory and intra-trajectory contrastive objectives, Hide-and-Seek localizes failure-indicative actions and induces temporally structured failure signals from trajectory-level supervision alone, without any step-level annotation. We evaluate Hide-and-Seek on LIBERO, VLABench, and a real-world robotic platform across three representative VLA policies: OpenVLA, $\pi_0$, and $\pi_{0.5}$.Our method achieves state-of-the-art multi-task failure detection performance with a practical accuracy--timeliness trade-off under conformal prediction, and generalizes well to both seen and unseen tasks.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI