日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2604.16331

BrainMem: 身体性エージェントのタスク計画のための脳に着想を得た進化する記憶

BrainMem: Brain-Inspired Evolving Memory for Embodied Agent Task Planning

シェア:XThreadsFacebookLINEはてブBluesky

人間の認知に着想を得た、訓練不要の階層的記憶システムを提案し、エージェントの過去の経験を知識グラフと記号的ガイドラインに変換して、LLMベースのプランナーが長期的なタスクをより成功させることを実証した。

詳しい要約

1. どんなもの?

- どんなもの? - 身体性タスク計画のためのBrainMemを提案 - 人間の認知に着想を得た階層的記憶システム - working, episodic, semantic memoryを備える - 訓練不要(training-free)でプラグアンドプレイ - 任意のマルチモーダルLLMと統合可能 - 長期的・目標指向の行動を3D環境で実行

2. 先行研究と比べてどこがすごい?

- 先行研究と比べてどこがすごい? - 既存のLLMベースプランナは状態を持たず反応的 - 永続的記憶がなく誤りを繰り返す問題 - BrainMemは記憶を保持し経験を蓄積 - モデル微調整や追加訓練が不要 - タスク固有のプロンプトエンジニアリングへの依存を大幅削減 - 長期的・空間的に複雑なタスクで最大の改善

3. 技術・手法の肝は?

- 技術や手法の肝はどこ? - 訓練不要の階層的記憶システム - 相互作用履歴を構造化知識グラフに変換 - 蒸留されたシンボリックガイドラインを生成 - プランナが過去経験から検索・推論・適応 - working, episodic, semantic memoryの3層 - マルチモーダルLLMとシームレスに統合

4. どうやって有効だと検証した?

- どうやって有効だと検証した? - 4つの代表ベンチマークで実験 - EB-ALFRED, EB-Navigation, EB-Manipulation, EB-Habitat - 多様なモデルと難易度サブセットで成功率を評価 - タスク成功率が有意に向上 - 長期的・空間的に複雑なタスクで最大の向上

5. 議論はある?

- 議論はある? - 進化的記憶が汎用的な身体性知能の有望でスケーラブルな機構 - 限界や課題については要旨からは不明 - 計算コストや記憶の一般化については要旨からは不明

6. 次に読むべき論文は?

- 次に読むべき論文は? - 要旨で参照/比較されている研究は明示されていない - 同分野の定番としてLLM-based planners, embodied task planning, memory-augmented agents, EB-ALFRED, EB-Navigation, EB-Manipulation, EB-Habitat 関連の研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xiaoyu Ma, Lianyu Hu, Wenbing Tang, Zixuan Hu, Zeqin Liao, Zhizhen Wu, Yang Liu

分類: cs.RO, cs.AI, cs.CV, cs.MA

原文アブストラクト

Embodied task planning requires agents to execute long-horizon, goal-directed actions in complex 3D environments, where success depends on both immediate perception and accumulated experience across tasks. However, most existing LLM-based planners are stateless and reactive, operating without persistent memory and therefore repeating errors and struggling with spatial or temporal dependencies. We propose BrainMem(Brain-Inspired Evolving Memory), a training-free hierarchical memory system that equips embodied agents with working, episodic, and semantic memory inspired by human cognition. BrainMem continuously transforms interaction histories into structured knowledge graphs and distilled symbolic guidelines, enabling planners to retrieve, reason over, and adapt behaviors from past experience without any model fine-tuning or additional training. This plug-and-play design integrates seamlessly with arbitrary multi-modal LLMs and greatly reduces reliance on task-specific prompt engineering. Extensive experiments on four representative benchmarks, including EB-ALFRED, EB-Navigation, EB-Manipulation, and EB-Habitat, demonstrate that BrainMem significantly enhances task success rates across diverse models and difficulty subsets, with the largest gains observed on long-horizon and spatially complex tasks. These results highlight evolving memory as a promising and scalable mechanism for generalizable embodied intelligence.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI