日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

エージェント学習arXiv:2605.09650

ワークスペース最適化:エージェントの訓練方法

Workspace Optimization: How to Train Your Agent

シェア:XThreadsFacebookLINEはてブBluesky

フロンティア言語モデルベースのエージェントの重みは変えられないため、代わりにエージェントが読み書きする外部基盤(ワークスペース)を進化させる手法を提案し、ARC-AGI-3で性能向上を実証した。

詳しい要約

1. どんなもの?

- 現代のfrontier language modelsを用いたagentは重みを適応できないことが多い。 - 代わりにagentのworkspace(読み書き・テストする構造化された外部基盤)を訓練対象とするworkspace optimizationを提案。 - 重み空間訓練の構造を模倣し、parametersの代わりにartifacts、dataの代わりにevidence、lossesの代わりにcounterexamples、gradientsの代わりにtextual feedbackを用いる。 - DreamTeamとして実装。ARC-AGI-3向けのmulti-agent harnessで、実行可能なworld model構築、plan、hypothesize、probe、strategize、failure routingを担う役割を持つ。

2. 先行研究と比べてどこがすごい?

- 従来のagentはfrontier modelの重みを適応できないが、workspace optimizationは外部基盤を進化させる点で異なる。 - 単一ショットで解けないhard multi-turn environmentsを対象とし、interactionを通じて学習する。 - ARC-AGI-3の公式scoring protocol下、25-game public setで2回の独立run平均において、protocol-matched SOTA agentのスコアを36%から38.4%に改善。 - さらに1ゲームあたりのenvironment actionsを31%削減。

3. 技術・手法の肝は?

- workspace optimizationの原理:weight-space trainingの構造を模倣。 - parameters → artifacts - data → evidence - losses → counterexamples - gradients → textual feedback - DreamTeamはmulti-agent harnessとして実装。 - 役割:executable world modelの構築、plan、hypothesize、probe、strategize、failure routing。 - hard multi-turn environmentsでfrontier modelが強いpriorを持ちつつも単一ショットで解けないタスクを対象。

4. どうやって有効だと検証した?

- ARC-AGI-3の現在の25-game public setを使用。 - 公式scoring protocolに従い、2回の独立runで平均を評価。 - DreamTeamはprotocol-matched SOTA agentのスコアを36%から38.4%に改善。 - 同時に1ゲームあたりのenvironment actionsを31%削減。

5. 議論はある?

- 要旨からは不明。 - ただし、workspace optimizationの有効性と効率性(スコア改善とaction削減)が示されている。 - 限界や議論の詳細は要旨に記載なし。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:protocol-matched SOTA agent(ARC-AGI-3の公式protocolに一致する最先端agent)。 - 関連手法:frontier language models、multi-agent harness、ARC-AGI-3。 - 同分野の定番:weight-space training、gradient-based optimization、reinforcement learning。 - 具体的な論文名は要旨に記載なし。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Elad Sarafian, Gal Kaplun, Ron Banner, Daniel Soudry, Boris Ginsburg

分類: cs.AI, cs.LG

原文アブストラクト

Modern agents built on frontier language models often cannot adapt their weights. What, then, remains trainable? We argue it is the agent's \emph{workspace}, the structured external substrate it reads, writes, and tests; we call its evolution workspace optimization. Workspace optimization targets hard multi-turn environments where a frontier model has strong priors but cannot solve the task in a single shot, so the agent must learn through interaction. We propose a principled way to evolve the workspace, mirroring the structure of weight-space training: artifacts in place of parameters, evidence in place of data, counterexamples in place of losses, and textual feedback in place of gradients. We instantiate the idea in DreamTeam, a multi-agent harness for ARC-AGI-3 whose roles build an executable world model, plan, hypothesize, probe, strategize, and route failures. On the current 25-game ARC-AGI-3 public set under the official scoring protocol and averaged over two independent runs, DreamTeam improves the SOTA protocol-matched agent's score from 36% to 38.4%, while using 31% fewer environment actions per game.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI