日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

継続学習/エージェントarXiv:2511.01093

継続学習は訓練ではなく適応:エージェントのためのオンライン適応

Continual Learning, Not Training: Online Adaptation For Agents

シェア:XThreadsFacebookLINEはてブBluesky

推論時に教師役と生徒役の二重エージェント構成と経験を蓄積する記憶を用いて、パラメータ更新なしで適応する勾配不要の継続学習システムATLASを提案し、サイバー脅威調査ベンチマークで高精度・低コストを達成した。

詳しい要約

1. どんなもの?

- 本論文は、deployed agents が実時間で適応するための **gradient-free continual learning** を提案する。 - 提案システム **ATLAS (Adaptive Teaching and Learning System)** は、reasoning を担う **Teacher** と execution を担う **Student** の dual-agent アーキテクチャを持つ。 - 経験から distilled guidance を蓄える **persistent learning memory** を持ち、orchestration layer に反映する。 - 適応の場を model parameters から system-level orchestration へ移す、system-centric paradigm を定式化する。 - 目的は **adaptive efficiency**: 推論時 orchestration により task success を最大化し computational cost を最小化す…

2. 先行研究と比べてどこがすごい?

- 従来の **Continual Learning (CL)** は gradient-based retraining による **catastrophic forgetting** の緩和が中心で、実時間適応する deployed agents には不向きと論じる。 - ATLAS はパラメータ更新を伴わない **gradient-free continual learning** を実現し、適応の locus を model parameters から system-level orchestration へ移す点が新しい。 - 推論時に supervision level や initial plan selection といった運用戦略を動的に調整できる。 - **ExCyTIn-Bench** 上で、Student に **GPT-5-mini** を用いて 54.1% success を達成し、より大きい **GPT-5 (High)** を 13% 上回りつつ cost を 86% 削減したと報告。

3. 技術・手法の肝は?

- **Teacher** が reasoning、**Student** が execution を担う dual-agent 構成で、両者を分離する。 - **persistent learning memory** に経験から distilled guidance を保存し、これを orchestration layer へ供給する。 - orchestration layer が supervision level や initial plan selection などの運用戦略を inference time に動的調整する。 - モデルパラメータの更新ではなく、system-level の orchestration を適応対象とする **gradient-free** な枠組み。 - 目的関数として **adaptive efficiency**(task success 最大化と computational cost 最小化)を掲げる。

4. どうやって有効だと検証した?

- Microsoft のオープンソース benchmark **ExCyTIn-Bench**(複雑な cyberthreat investigation を模擬)で評価。 - Student に **GPT-5-mini** を用いた ATLAS が 54.1% success を達成し、**GPT-5 (High)** を 13% 上回り、cost を 86% 削減。 - **Cross-incident validation** により generalization を確認:Incident #5 の frozen pamphlets が zero retraining で accuracy を 28% から 41% へ改善。 - 出力構成が verbose exploration から structured reasoning へ移行したと報告。

5. 議論はある?

- **gradient-free continual learning** が adaptive で deployable な AI systems への実行可能な道筋であると主張。 - 適応をパラメータではなく system-level orchestration に置く **system-centric paradigm** を提示し、adaptive efficiency を目的とする。 - 因果的に注釈された traces が explicit world models の訓練に有用と述べる。 - 限界や反証、詳細な議論は要旨からは不明。

6. 次に読むべき論文は?

- **ExCyTIn-Bench** は本研究の評価 benchmark であり、関連研究として参照すべき。 - 比較対象の **GPT-5 (High)** および Student に用いた **GPT-5-mini** は関連モデル。 - 背景として **Continual Learning (CL)** および **catastrophic forgetting** の文献。 - 関連概念として **explicit world models** の研究。 - その他の具体的な参照論文は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Aman Jaglan, Jarrod Barnes

分類: cs.LG, cs.AI

原文アブストラクト

Continual Learning (CL) methods have traditionally focused on mitigating catastrophic forgetting through gradient-based retraining, an approach ill-suited for deployed agents that must adapt in real time. We introduce our Adaptive Teaching and Learning System (ATLAS), a dual-agent architecture that decouples reasoning (Teacher) from execution (Student) and incorporates a persistent learning memory that stores distilled guidance from experience. This informs the orchestration layer, enabling the system to dynamically adjust its operational strategies, such as supervision level or initial plan selection, at inference time. In doing so, ATLAS achieves gradient-free continual learning, shifting the locus of adaptation from model parameters to system-level orchestration. We formulate this as a system-centric paradigm for continual learning, where the objective is adaptive efficiency: maximizing task success while minimizing computational cost through inference-time orchestration rather than parameter updates. Evaluated on Microsoft's ExCyTIn-Bench, an open-source benchmark simulating complex cyberthreat investigation, ATLAS achieves 54.1% success with GPT-5-mini as its Student, outperforming the larger GPT-5 (High) by 13% while reducing cost by 86%. Cross-incident validation demonstrates generalization: frozen pamphlets from Incident #5 improve accuracy from 28% to 41% with zero retraining, while shifting output composition from verbose exploration to structured reasoning. Together, these findings establish gradient-free continual learning as a viable path toward adaptive, deployable AI systems and provide causally annotated traces valuable for training explicit world models.

  1. 1パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  2. 2Boston Dynamics、GlobalFoundriesでAtlasを試験へ 半導体製造で2027年初頭から半導体・GPU
  3. 3日経クロステック、NVIDIA取締役会のファンCEO解任議論を報道 同社は同日、辞任を発表業界動向
  4. 4川崎重工業のロボット外販を報道新製品・発表
  5. 5NVIDIA、ヒトの動きをロボットに適応する「SOMA Retargeter」を紹介研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI