日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2512.03913

成功・失敗デモンストレーションを活用した階層型視覚言語行動モデル

Hierarchical Vision Language Action Model Using Success and Failure Demonstrations

シェア:XThreadsFacebookLINEはてブBluesky

失敗デモも学習信号として活用し、高レベル推論と低レベル制御を分離した階層型VLAモデルVINEを提案。計画時に失敗を考慮した探索を行うことでマニピュレーションの成功率とロバスト性を向上させた。

詳しい要約

1. どんなもの?

- 混合品質データセット(成功・失敗の teleoperated demonstrations)を用いる階層型 Vision-Language-Action (VLA) model「VINE」の提案。 - 高レベル推論 (System 2) と低レベル制御 (System 1) を分離し、hierarchical reinforcement learning の形式で構成。 - 失敗をノイズではなく構造化された学習信号として活用し、計画時の failure-aware reasoning を実現する。

2. 先行研究と比べてどこがすごい?

- 従来の VLA model は teleoperated の成功 demonstrations のみで学習し、収集時に自然発生する多数の失敗を捨てていた。 - 失敗は policy がどこでどう脆くなるかを示す情報を含む点に着目。 - VINE は失敗を feasibility scoring に組み込み、実行前に脆い分岐を pruning できる点が先行研究と異なる。

3. 技術・手法の肝は?

- System 2 が 2D scene-graph abstraction 上で feasibility-guided tree search を実行。 - 成功・失敗の両方から success probabilities を予測し、subgoal transitions を提案、脆い分岐を実行前に pruning。 - 選択された subgoal sequence を System 1 に渡し、低レベル action を agent の core skills を変更せず実行。 - 完全に offline teleoperation data から学習し、negative experience を decision loop に直接統合。

4. どうやって有効だと検証した?

- 複数の challenging manipulation tasks において評価。 - 成功率と robustness が一貫して改善したと報告。 - 失敗データが VLA の広い competence を robust な実行へ変換する上で不可欠な資源であることを示した。

5. 議論はある?

- 失敗データを構造化信号として扱う有効性を主張。 - 具体的な限界・失敗ケース・計算コスト・tree search のスケーラビリティに関する議論は要旨からは不明。 - 実環境でのオンライン適応や他タスクへの汎化性についても要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている具体的な先行研究は明示されていない。 - 関連手法として Vision-Language-Action (VLA) model、hierarchical reinforcement learning、tree search を用いた planning、scene-graph ベースの推論、offline teleoperation data による学習を挙げる。 - 同分野の定番として RT-1/RT-2 系の VLA model や behavior cloning 関連研究が次に読む候補となる(一般名)。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jeongeun Park, Jihwan Yoon, Byungwoo Jeon, Juhan Park, Jinwoo Shin, Namhoon Cho, Kyungjae Lee, Sangdoo Yun, Sungjoon Choi

分類: cs.RO, cs.AI

原文アブストラクト

Prior Vision-Language-Action (VLA) models are typically trained on teleoperated successful demonstrations, while discarding numerous failed attempts that occur naturally during data collection. However, these failures encode where and how policies can be fragile, information that can be exploited to improve robustness. We address this problem by leveraging mixed-quality datasets to learn failure-aware reasoning at planning time. We introduce VINE, a hierarchical vision-language-action model that separates high-level reasoning (System 2) from low-level control (System 1) under a hierarchical reinforcement learning formalism, making failures usable as a structured learning signal rather than noisy supervision. System 2 performs feasibility-guided tree search over a 2D scene-graph abstraction: it proposes subgoal transitions, predicts success probabilities from both successes and failures, and prunes brittle branches before execution, effectively casting plan evaluation as feasibility scoring. The selected subgoal sequence is then passed to System 1, which executes low-level actions without modifying the agent's core skills. Trained entirely from offline teleoperation data, VINE integrates negative experience directly into the decision loop. Across challenging manipulation tasks, this approach consistently improves success rates and robustness, demonstrating that failure data is an essential resource for converting the broad competence of VLAs into robust execution.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI