日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2605.27762

PEAM: Minecraftにおける経験の対比的内部化によるパラメトリック具現化エージェントメモリ

PEAM: Parametric Embodied Agent Memory through Contrastive Internalization of Experience in Minecraft

シェア:XThreadsFacebookLINEはてブBluesky

Minecraft環境で、エージェントの記憶を推論時の検索からパラメータ内蔵スキルへ変換するフレームワークを提案。失敗と修正のペアを学習し、忘却を防ぎながら自己進化する。

詳しい要約

1. どんなもの?

- Minecraftにおけるembodied agentの記憶フレームワークPEAMを提案。 - 記憶を推論時retrievalからパラメータ内在型スキルへ変換。 - 遅いdeliberative LLMと速いparametric moduleを組み合わせ。 - 速いモジュールはmultimodal Mixture-of-Experts LoRAで、カテゴリ別に物理的に分離されたadaptersを持つ。 - 失敗を訓練信号として活用し、failure-correction trajectory pairsを内在化。

2. 先行研究と比べてどこがすごい?

- 従来のretrieval-based embodied agentsやparametric memory variantsと比較して、parametric-versus-retrieval efficiencyを改善。 - パラメータレベルでの継続学習を可能にし、catastrophic forgettingを軽減。 - タスク固有の手動調整なしに自己進化する点が新しい。 - 失敗を第一級の訓練信号として扱う点が先行研究と異なる。

3. 技術・手法の肝は?

- 遅いdeliberative LLMと速いparametric moduleの二重構造。 - 速いモジュールはmultimodal Mixture-of-Experts LoRAで、カテゴリ別に物理的に分離されたadaptersを採用。 - failure-correction trajectory pairsをjoint behavioral-cloningとcontrastive objectiveで内在化。 - parameterization-worthiness scoreで内在化すべき経験を決定。 - scale-free self-triggered consolidation mechanismで内在化のタイミングを決定。

4. どうやって有効だと検証した?

- Minecraftでの実験を実施。 - 長期的タスク性能の向上を確認。 - 以前に統合されたスキルに対する忘却の軽減を確認。 - retrieval-based embodied agentsやparametric memory variantsと比較してparametric-versus-retrieval efficiencyの改善を確認。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- retrieval-based embodied agents - parametric memory variants - Mixture-of-Experts LoRA - behavioral cloning - contrastive learning

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yuchen Guo, Junli Gong, Weicheng Wang, Hongmin Cai, Yiu-ming Cheung, Weifeng Su

分類: cs.AI

原文アブストラクト

We present PEAM, a Parametric Embodied Agent Memory framework in Minecraft that transforms agent memory from inference-time retrieval into parameter-resident skills internalized through experience. PEAM pairs a slow deliberative LLM for open-ended reasoning with a fast parametric module for reflexive execution of consolidated skills. The fast module is a multimodal Mixture-of-Experts LoRA architecture with per-category physically isolated adapters, enabling parameter-level continual learning without catastrophic forgetting. We treat failure as a first-class training signal: failure--correction trajectory pairs are internalized through a joint behavioral-cloning and contrastive objective, so the agent learns not only what succeeds but also how corrected actions differ from failed ones. To govern consolidation, PEAM introduces a parameterization-worthiness score for deciding which experience should be internalized, and a scale-free self-triggered consolidation mechanism for deciding when to internalize without task-specific hand-tuned thresholds, making the agent self-evolving as the trigger transfers across task distributions without re-tuning. Experiments in Minecraft show that PEAM improves long-horizon task performance, mitigates forgetting on previously consolidated skills, and improves parametric-versus-retrieval efficiency over retrieval-based embodied agents and parametric memory variants.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI