日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

メモリシステムarXiv:2606.03374

eMEM: 身体化エージェントのためのハイブリッド時空間メモリシステム

eMEM: A Hybrid Spatio-Temporal Memory System For Embodied Agents

シェア:XThreadsFacebookLINEはてブBluesky

身体化エージェント向けに、意味・空間・時間で検索可能なハイブリッドグラフベースのメモリシステムを提案し、認知心理学のパラダイムに基づくベンチマークも導入した。

詳しい要約

1. どんなもの?

- 物理環境で動作するembodied agents向けのhybrid graph-based memory system「eMEM」 - 意味・空間・時間の3軸で検索可能なmulti-index architectureを単一graph modelで統合 - SQLITE(構造化)、hnswlib(近似最近傍意味検索)、R-tree(空間クエリ)を採用 - 階層的consolidation pipelineで知覚観測を圧縮要約(海馬-新皮質consolidationを模倣) - LLM tool calling向けに10のrecall toolsを提供(concept-to-location解決、cross layer recall等) - 完全embeddedでagentと同一プロセス内動作 - 評価用にProcTHOR-10K上のeMEM-Bench v1も提案

2. 先行研究と比べてどこがすごい?

- 既存のagent memory(Generative Agents, MemGPT, A-MEM)はmemoryをtext streamやknowledge graphとして扱い、意味・空間・時間の同時検索ができない - eMEMはmulti-index architectureでこのギャップを埋める - 評価面でもLoCoMoやOpenEQAのようなsurface-task benchmarkでは得られない診断性を提供 - 8つの認知心理学パラダイムに基づくbenchmarkで、人間や既存agent-memory研究の文献と比較解釈可能 - 純粋なRAG baseline(flat_rag ablation)に対し、context dependent retrievalで30pt、DRM lure rejectionで29pt優位

3. 技術・手法の肝は?

- multi-index architecture:SQLITE(構造化storage)、hnswlib(approximate nearest neighbour semantic search)、R-tree(spatial queries)を単一graph modelの背後で統合 - tiered consolidation pipeline:生の知覚観測を圧縮要約し、生物の海馬-新皮質consolidationを模倣 - 10のagent-facing recall tools:concept-to-location resolutionやcross layer recallをfirst-class operationとしてLLM tool callingに公開 - 完全embeddedでin-process動作 - eMEM-Bench v1:ProcTHOR-10Kシーン上に構築、8つの認知心理学パラダイム(DRM lures, pattern separation, pattern completion, source monitoring, context-depen…

4. どうやって有効だと検証した?

- eMEM-Bench v1(ProcTHOR-10Kシーン、988 probes)で評価 - 80.8 weighted meanを達成 - room-unique itemsにおいて1時間から1年までのsimulated delayでretention curveがceilingでflat - flat_rag ablation(純粋RAG baseline)との比較で、context dependent retrievalで30pt、DRM lure rejectionで29ptの差を確認し、multi-layer storageとconsolidationの寄与を分離 - systemとbenchmark codeを公開

5. 議論はある?

- 要旨からは不明(limitationsやfailure cases、計算コスト、スケーラビリティ等の議論は明示されていない) - ただし、8つの認知心理学パラダイムに基づく診断性の高さを主張し、surface-task benchmarkでは得られない解釈可能性を強調 - flat_rag ablationによりmulti-layer storageとconsolidationの貢献を分離して議論

6. 次に読むべき論文は?

- Generative Agents - MemGPT - A-MEM - LoCoMo - OpenEQA - ProcTHOR-10K - flat_rag ablation(純粋RAG baseline) - 関連するmemory-systems literature(人間の記憶研究)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: A. Haroon Rasheed, Maria Kabtoul

分類: cs.RO

原文アブストラクト

We present eMEM (Embodied Memory), a hybrid graph-based memory system for embodied agents operating in physical environments. Current agent memory architectures, such as Generative Agents, MemGPT, and A-MEM, treat memory as text streams or knowledge graphs, but embodied agents require memory that is simultaneously searchable by meaning, space, and time. eMEM fills this gap with a multi-index architecture (SQLITE for structured storage, hnswlib for approximate nearest neighbour semantic search, and an R-tree for spatial queries) unified behind a single graph model. A tiered consolidation pipeline transforms raw perceptual observations into compressed summaries, mirroring hippocampal-neocortical consolidation in biological systems. Ten agent-facing recall tools expose memory retrieval primitives, including concept-to-location resolution and cross layer recall, as first-class operations for LLM tool calling. The system is fully embedded and runs in-process alongside the agent. In addition we introduce eMEM-Bench v1, a benchmark we construct over ProcTHOR-10K scenes for embodied memory evaluation. The benchmark is organised explicitly around eight cognitive-psychology paradigms (DRM lures, pattern separation, pattern completion, source monitoring, context-dependent retrieval, long-horizon interference, serial position, and a foil augmented retention curve), each chosen so that the result is interpretable against the broader memory-systems literature in humans and prior agent-memory systems; a level of diagnostic that surface-task benchmarks like LoCoMo or OpenEQA cannot provide. eMEM scores 80.8 weighted mean over 988 probes, with a flat retention curve at ceiling from 1 h to 1 yr of simulated delay on room-unique items. We show that a pure RAG baseline (the flat_rag ablation) loses 30 pt on context dependent retrieval and 29 pt on DRM lure rejection, isolating the contribution of multi-layer storage and consolidation respectively. We release both the system and the benchmark code.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  4. 4SoftBank主導、Agile Robotsが5億ドル調達 NVIDIAと日立も参加資金調達
  5. 5NTT、ロボットの行動前に荷崩れを予測研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI