日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

エージェントアーキテクチャ探索arXiv:2606.30111

具現化エージェントアーキテクチャ設計の自動化

Automating the Design of Embodied Agent Architectures

シェア:XThreadsFacebookLINEはてブBluesky

具現化エージェントのアーキテクチャ設計を自動化する手法を提案し、視覚言語ナビゲーションや操作タスクで有効性を検証した。

詳しい要約

1. どんなもの?

- 本論文は、embodied agent のアーキテクチャ設計を自動化する Agent Architecture Search (AAS) を、知覚を持つ embodied agent に適用する研究。 - 従来は perception, memory, planning, action モジュールを人手で組み合わせていたが、その設計空間を探索する。 - AgentCanvas と KDLoop を導入し、vision-language navigation, embodied question answering, language-conditioned manipulation の4つの embodied executor で3つの AAS 変種を評価。 - 3x4 の実験行列により、アーキテクチャ探索が embodied タスクで成功率の改善をもたらす可能性と限界を示す。

2. 先行研究と比べてどこがすごい?

- 先行の AAS は text-domain agent を対象としており、知覚を持つ embodied agent での体系的な評価は行われていなかった。 - 本研究は simulator rollouts を通じて embodied agent への AAS の転移を検証した点が新しい。 - その結果、architecture-level search が embodied タスクで実用的かつ方向性のある成功率改善を生み出しうることを示した。 - 一方で、text-domain では目立たない制約(rollout noise による最適化信号のマスク、局所編集ベイスンへの陥り、episode-level credit assignment の部分的創発)を明らかにした。

3. 技術・手法の肝は?

- AgentCanvas: embodied executor を編集可能な node-and-wire プログラムとして扱う typed-graph runtime。simulator-aware execution と episode-level logs を提供。 - KDLoop: coding-agent による探索手続きで、proposal, critique, experiment, distillation を循環。stall 後には triggered reflection を実行。 - 3つの AAS 変種を4つの embodied executor に適用し、3x4 の評価行列を構成。 - 詳細なログを用いて episode-level credit assignment の創発を調べる。

4. どうやって有効だと検証した?

- vision-language navigation, embodied question answering, language-conditioned manipulation を含む4つの embodied executor で3つの AAS 変種を評価。 - simulator rollouts に基づく成功率で有効性を検証。 - 高スコアに見えた候補が leak-bearing として棄却されるなど、探索結果の妥当性も確認。 - 実験により、rollout noise や局所解、credit assignment の限界といった制約を特定。

5. 議論はある?

- architecture-level search は embodied タスクで deployable かつ directional な成功率改善をもたらす可能性がある。 - しかし、最適化信号が rollout noise にマスクされる、探索が局所編集ベイスンに陥る、episode-level credit assignment が詳細ログがあっても部分的にしか創発しない、といった制約が明らかになった。 - これらの結果は、embodied agent に対する自動アーキテクチャ探索の可能性と現時点での限界の両方を特徴づける。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究: Agent Architecture Search (AAS) の text-domain 版。 - 関連手法: vision-language navigation, embodied question answering, language-conditioned manipulation の各 embodied executor。 - その他、要旨からは具体的な次読論文は不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jian Zhou, Sihao Lin, Jin Li, Shuai Fu, Gengze Zhou, Qi Wu

分類: cs.RO, cs.AI, cs.LG

原文アブストラクト

Embodied agents are typically built as hand-designed compositions of perception, memory, planning, and action modules. This modularity exposes a large architectural design space, but current systems still rely on researcher intuition to choose where information is stored, how observations are processed, and how model calls are connected. Agent Architecture Search (AAS) automates such design for text-domain agents, but has not been systematically evaluated on perceptual embodied agents through simulator rollouts. We study this transfer. We introduce AgentCanvas, a typed-graph runtime that hosts embodied executors as editable node-and-wire programs with simulator-aware execution and episode-level logs, and KDLoop, a coding-agent search procedure that cycles through proposal, critique, experiment, and distillation, with triggered reflection after stalls. We evaluate three AAS variants across four embodied executors spanning vision-language navigation, embodied question answering, and language-conditioned manipulation. The resulting 3x4 matrix shows that architecture-level search can produce deployable and directional success-rate gains on embodied tasks, while one apparent high-scoring candidate is rejected as leak-bearing. At the same time, the experiments expose constraints that are muted in text-domain AAS: optimization signals can be masked by rollout noise, search can become trapped in local edit basins, and episode-level credit assignment only partially emerges even when detailed logs are available. These results characterize both the promise and the current limits of automated architecture search for embodied agents.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI