日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2609.33378

エージェント間の再帰的ハーネス蒸留によるロボットマニピュレーション

Recursive Harness Distillation across Agents for Robot Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

強いエージェントの介入経験をプレイブックとして軽量エージェントに蒸留し、実行フィードバックで再帰的に改善することで、パラメータ更新なしにロボット操作の成功率を高める手法を提案。

詳しい要約

1. どんなもの?

- VLAモデルによるロボットマニピュレーションの実行時適応を支援する手法。 - 強いagentの介入経験をplaybookとして蒸留し、軽いagentに再利用させる。 - パラメータ更新なしで新規タスクに介入知識を適用する。

2. 先行研究と比べてどこがすごい?

- VLAモデルは広範な操作能力を持つが、失敗診断と行動適応が苦手。 - 強いagentは対話的に有効な介入を発見できるが、その経験を蓄積・再利用する枠組みがなかった。 - 本研究は経験をplaybookとして蒸留し、agent間で再利用可能にした点が新しい。

3. 技術・手法の肝は?

- 強いagentが自身の経験をplaybookとして軽いagentに蒸留する。 - 軽いagentの実行フィードバックを用いてplaybookを再帰的に洗練する。 - モデルパラメータを更新せず、介入知識を新規タスクに再利用する。

4. どうやって有効だと検証した?

- 実世界マニピュレーションで成功率が37.3%から64.0%に向上。 - SimplerEnv Bridgeでplaybookを持つ軽いagentが66.7%成功、GR00T-onlyベースラインは41.7%。 - playbookなしの強いagentを上回り、playbookは強いagentにも有効で79.2%成功。

5. 議論はある?

- harness distillationの実現可能性を示す。 - 介入経験の蓄積・実行による洗練・agent間再利用が可能。 - 限界や課題については要旨からは不明。

6. 次に読むべき論文は?

- GR00T(ベースラインとして比較) - SimplerEnv Bridge(評価環境) - Vision-language-action (VLA) models(関連手法)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Seungyeon Kim, Junhoo Lee, Minkyu Kim, Baekseung Kim, Nojun Kwak

分類: cs.RO, cs.AI, cs.CV, cs.LG

原文アブストラクト

A central goal in robotics is to enable manipulation across changing tasks and environments. Vision-language-action (VLA) models provide broad manipulation capabilities but can struggle when execution requires diagnosing failures and adapting behavior. Strong agents can discover effective interventions through interaction with these policies. We propose Recursive Harness Distillation to accumulate this experience as reusable guidance across agents. A strong agent distills its experience into a playbook for a light agent, then recursively refines the playbook using the light agent's execution feedback. The resulting playbook enables agents to reuse accumulated intervention knowledge in new task instances without updating model parameters. In real-world manipulation, the harness improves success from 37.3% to 64.0%. On SimplerEnv Bridge, the light agent with the playbook achieves 66.7% success, compared with 41.7% for the GR00T-only baseline, and outperforms the strong agent without a playbook. The same playbook also benefits the strong agent, which reaches 79.2% success. These results demonstrate the feasibility of harness distillation for robotics: intervention experience can be accumulated, refined through execution, and reused across agents to improve manipulation.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI