日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2609.39304

スケールと選択:視覚インターフェースロボットエージェントのための自動ハーネス進化を成功させる要因

Scale and Selection: What Makes Automatic Harness Evolution Work for Visual-Interface Robot Agents

シェア:XThreadsFacebookLINEはてブBluesky

コーディングエージェントがロボットポリシーのハーネス(プロンプト・ツール・制御規則)を自動改善する際、1ラウンドあたりのロールアウト数を増やすと汎化性能が向上し、Champion-Challenger選択を導入すると性能低下を防げることを示した。

詳しい要約

1. どんなもの?

オフ・ザ・シェルフの coding agent を robot policy として直接用い、browser-based 3D interface を screenshot で観察し virtual target gripper を tool 経由で操作する設定を扱う。このとき agent の harness(prompt・tool・control rule)が成否を大きく左右するが、従来は手書きだった。本研究は別の coding agent(optimizer agent)により harness を自動改善できることを示し、その成否を決める二要因を報告する。

2. 先行研究と比べてどこがすごい?

従来 harness は人手で書かれていた。本研究は自動進化を可能にし、さらに『optimizer agent が見る rollout 数』と『改訂の選別方法』が性能を左右すると示す。rollout を 5→100 に増やすと held-out 成功率が 47%→67% に上昇し、小規模訓練では訓練 70% だが held-out 54% と過学習する。改訂を無条件採用すると 10 ラウンド以内に性能が低下するが、Champion-Challenger selection を加えると 30 ラウンドで held-out 51%→67% に改善する。

3. 技術・手法の肝は?

optimizer agent が harness(prompt・tool・control rule)を改訂する自動進化ループ。各ラウンドで optimizer agent に提示する rollout 数を増やし、昇格判断の signal-to-noise ratio を高める。改訂の採用には Champion-Challenger selection を用い、同一の固定評価セットで incumbent を厳密に上回る場合のみ昇格する。

4. どうやって有効だと検証した?

訓練 rollout 数を 5 から 100 に増やし、held-out 成功率が 47%→67% に上昇することを確認。小規模訓練では訓練 70%・held-out 54% の過学習を観測。改訂を無条件採用すると 10 ラウンド以内に性能低下。Champion-Challenger selection 導入で 30 ラウンドにわたり held-out 51%→67% に改善することを検証。

5. 議論はある?

自動 harness 進化は feasible だが、その利得は各判断を支える rollout の規模と、optimizer agent の改訂をどう選別するかに依存する。rollout が少ないと binary outcome のノイズで運による昇格が起こり、無条件採用では誤った編集が蓄積し性能がドリフトする。

6. 次に読むべき論文は?

要旨からは不明(参照・比較された個別研究は明示されていない)。関連手法として coding agent、robot policy、Champion-Challenger selection、harness evolution が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhijie Wei, Ferris Tan, Jinghui Wang

分類: cs.RO, cs.AI

原文アブストラクト

When an off-the-shelf coding agent is used directly as a robot policy, observing a browser-based 3D interface through screenshots and acting by posing a virtual target gripper through a few tools, the agent's harness, its prompts, tools, and control rules, largely determines success, and until now it has been written by hand. We show that this harness can be improved automatically by another coding agent, the optimizer agent, and report two findings about what makes it work. First, the number of rollouts the optimizer agent sees per round governs whether the evolved harness is trustworthy, generalizes, and improves steadily. A single rollout is a noisy binary outcome, so with few rollouts per round a revision can be promoted on luck; enlarging the batch raises the signal-to-noise ratio of every promotion decision. Holding rounds fixed and growing the training set from 5 to 100 rollouts, held-out success rises from 47% to 67%, while small training sets overfit, reaching 70% on training tasks but only 54% held-out. Second, the optimizer agent must not be given free rein. With every revision it proposes accepted unconditionally, performance drifts downward within ten rounds as ill-judged edits accumulate; adding the most basic safeguard, Champion-Challenger selection that promotes a revision only if it strictly beats the incumbent on the same fixed evaluation set, turns the same loop into one that raises held-out success from 51% to 67% over 30 rounds. Automatic harness evolution for visual-interface robot agents is thus feasible, but its gains hinge on the rollout scale behind each decision and on how the optimizer agent's revisions are selected.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  4. 4GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  5. 5Google DeepMind、ロボット向けAIを発表新製品・発表

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI