日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マルチエージェントarXiv:2509.14295

Aegis: マルチエージェントシステムのための自動エラー生成と帰属

Aegis: Automated Error Generation and Attribution for Multi-Agent Systems

シェア:XThreadsFacebookLINEはてブBluesky

LLMベースのマルチエージェントシステムにおいて、成功軌道に文脈依存のエラーを注入して大規模なエラー帰属データセットを自動生成し、教師あり・強化学習・対照学習でエラー原因エージェントを特定する手法を提案。

詳しい要約

1. どんなもの?

- LLM ベースの multi-agent systems (MAS) における error attribution のための大規模データセットとフレームワーク - Aegis と名付けられた自動 error 生成・帰属フレームワーク - 9,533 の trajectory に faulty agent と error mode を注釈付けしたデータセットを構築 - 多様な MAS architecture と task domain をカバー - 3 つの学習パラダイム (Supervised Fine-Tuning, Reinforcement Learning, Contrastive Learning) を支援 - 各パラダイム向けの学習手法を開発

2. 先行研究と比べてどこがすごい?

- 既存の error attribution 用データセットは人手注釈に依存し、コスト高でスケールしない - Aegis は LLM-based manipulator により自動で error を注入し大規模データを生成 - 9,533 trajectory という大規模かつ多様なデータを実現 - fine-grained なラベルと positive-negative サンプルペアの構造的配置を活用 - 学習済みモデルが桁違いに大きい proprietary model と競合または上回る性能を示した点

3. 技術・手法の肝は?

- LLM-based manipulator が成功した実行 trajectory に context-aware な error を適応的に注入 - faulty agent と error mode を注釈として付与 - positive-negative サンプルペアの構造的配置を利用 - Supervised Fine-Tuning, Reinforcement Learning, Contrastive Learning の 3 パラダイムそれぞれの学習手法を開発 - 詳細なアーキテクチャや manipulator の具体設計は要旨からは不明

4. どうやって有効だと検証した?

- 包括的な実験を実施し、学習済みモデルが error attribution で一貫した大幅な改善を達成 - 複数の fine-tuned LLM が桁違いに大きい proprietary model と競合または上回る性能を示す - 自動データ生成フレームワークの有効性を実証 - 具体的なベンチマーク名や評価指標は要旨からは不明

5. 議論はある?

- MAS の能力向上に伴う構造的 fragility とデバッグ困難性を指摘 - 大規模で多様な error attribution データセットの深刻な不足を課題として提示 - 人手注釈のコストとスケーラビリティの問題を議論 - 自動データ生成がより robust で interpretable な MAS 開発の重要資源となることを主張 - 限界や今後の課題についての詳細は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない - 関連手法として Supervised Fine-Tuning, Reinforcement Learning, Contrastive Learning の各学習パラダイム - 同分野の定番として LLM-based multi-agent systems の fault detection / error attribution 研究や、LLM によるデータ合成 (data synthesis) 関連研究 - 具体的な論文名は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Fanqi Kong, Ruijie Zhang, Huaxiao Yin, Guibin Zhang, Xiaofei Zhang, Ziang Chen, Zhaowei Zhang, Xiaoyuan Zhang, Song-Chun Zhu, Xue Feng

分類: cs.RO, cs.MA

原文アブストラクト

Large language model based multi-agent systems (MAS) have unlocked significant advancements in tackling complex problems, but their increasing capability introduces a structural fragility that makes them difficult to debug. A key obstacle to improving their reliability is the severe scarcity of large-scale, diverse datasets for error attribution, as existing resources rely on costly and unscalable manual annotation. To address this bottleneck, we introduce Aegis, a novel framework for Automated error generation and attribution for multi-agent systems. Aegis constructs a large dataset of 9,533 trajectories with annotated faulty agents and error modes, covering diverse MAS architectures and task domains. This is achieved using a LLM-based manipulator that can adaptively inject context-aware errors into successful execution trajectories. Leveraging fine-grained labels and the structured arrangement of positive-negative sample pairs, Aegis supports three different learning paradigms: Supervised Fine-Tuning, Reinforcement Learning, and Contrastive Learning. We develop learning methods for each paradigm. Comprehensive experiments show that trained models consistently achieve substantial improvements in error attribution. Notably, several of our fine-tuned LLMs demonstrate performance competitive with or superior to proprietary models an order of magnitude larger, validating our automated data generation framework as a crucial resource for developing more robust and interpretable multi-agent systems. Our project website is available at https://kfq20.github.io/Aegis-Website/.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI