日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2611.17394

Agentic-Teacher: 失敗駆動型VLA事後学習のためのエージェント型データエンジン

Agentic-Teacher: An Agentic Data Engine for Failure-Driven VLA Post-Training

シェア:XThreadsFacebookLINEはてブBluesky

VLAモデルの失敗ロールアウトを分析し、コーディングエージェントが閉ループのコードポリシーを反復開発して弱点を補う実演データを自動生成・選別する事後学習エンジンを提案。LIBERO-10やMetaWorld-10で成功率を向上させた。

詳しい要約

1. どんなもの?

- 事前学習済み VLA (vision-language-action) モデルの弱点を狙った実演データを自律生成するデータエンジン「Agentic-Teacher」 - 入力は VLA checkpoint・タスク仕様・環境ツール設定 - 失敗した rollout を分析し、介入状態を選び、coding agent が閉ループでコードポリシーを反復開発 - 検証済みポリシーを再利用可能な実演生成器として使い、VLA が苦手な状態からの成功継続を収集 - 得た実演で post-training し、coding-agent 支援なしで動く更新ポリシーを得る

2. 先行研究と比べてどこがすごい?

- coding agent による自律的な実演生成では「成功実行」だけでは VLA 学習に有効な supervision にならない、という課題を指摘 - 単なる成功デモ収集ではなく、対象 VLA の失敗に基づいて生成と curation を結びつける点が特徴 - 失敗 rollout の分析→介入状態選択→ポリシー開発→実演生成→フィルタ→post-training を一貫パイプライン化 - 具体的な先行研究名との比較は要旨からは不明

3. 技術・手法の肝は?

- 失敗 rollout を分析し、介入すべき状態を選択 - 実行フィードバックを用いて coding agent が閉ループでコードポリシーを反復改善 - 検証済みポリシーで VLA が苦戦する状態からの成功継続を収集 - 学習向けに temporally correlated action noise を導入し state-action 被覆を拡大 - gripper transitions を保ちつつ idle frames を除去 - frozen base model の flow-matching loss で trajectory をフィルタ - 得た実演を成功した VLA rollout と合わせて post-training

4. どうやって有効だと検証した?

- シミュレーションで評価 - $\pi_0$ の成功率が LIBERO-10 で 79.4%→87.8% - MetaWorld-10 で 80.4%→90.6% - RoboCasa の3タスクで 0%→30.0% - 更新後ポリシーは coding-agent 支援なしで動作

5. 議論はある?

- 成功実行だけでは有効な supervision にならない点を出発点に、失敗駆動のデータ生成と curation の重要性を示唆 - temporally correlated action noise や idle frame 除去、flow-matching loss フィルタの各設計の寄与の詳細は要旨からは不明 - 実機での有効性や他 VLA・他タスクへの汎化は要旨からは不明 - RoboCasa での 30.0% は改善を示すが絶対性能は限定的で、更なる改善余地が議論対象になり得る

6. 次に読むべき論文は?

- $\pi_0$ (本手法が post-training 対象とする VLA) - LIBERO-10 / MetaWorld-10 / RoboCasa に関する VLA 学習・評価研究 - coding agent による自律デモ生成の先行研究(要旨では具体名不明) - flow-matching に基づく VLA(flow-matching loss で trajectory フィルタを行う関連手法)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Gongyue Teng, Yuqing Xie, Yixian Zhang, Feng Gao, Shu'ang Yu, Jiaji Rao, Sukai Wang, Guanghui Ren, Ya Zhang, Maoqing Yao, Yu Wang, Chao Yu, Xinlei Chen

分類: cs.RO

原文アブストラクト

Improving a pretrained vision-language-action (VLA) model requires demonstrations that address its weaknesses and provide effective supervision for learning. Coding agents can autonomously generate demonstrations through environment interaction, yet successful execution alone does not ensure effective supervision for VLA learning. We introduce Agentic-Teacher, an autonomous data engine for failure-driven VLA post-training. Given a VLA checkpoint, a task specification, and configured environment tools, the engine analyzes failed rollouts, selects intervention states, and iteratively develops closed-loop code policies through execution feedback. Validated policies become reusable demonstration generators that collect successful continuations from states where the VLA struggles. To make these demonstrations suitable for learning, Agentic-Teacher introduces temporally correlated action noise to broaden state-action coverage, removes idle frames while preserving gripper transitions, and filters trajectories using the frozen base model's flow-matching loss. The resulting demonstrations are combined with successful VLA rollouts for post-training, yielding an updated policy that operates without coding-agent assistance. Agentic-Teacher thus connects the weaknesses of a target VLA to both the generation and curation of its training data. In simulation, it improves $π_0$ success rates from 79.4% to 87.8% on LIBERO-10, from 80.4% to 90.6% on MetaWorld-10, and from 0% to 30.0% across three RoboCasa tasks.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3Google DeepMind、ロボット向けAIを発表新製品・発表
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI