日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ナビゲーションarXiv:2606.03509

EvoMemNav: ゼロショット具現化ナビゲーションのための自己進化型高精細メモリ

EvoMemNav: Efficient Self-Evolving Fine-Grained Memory for Zero-Shot Embodied Navigation

シェア:XThreadsFacebookLINEはてブBluesky

観測を細粒度で保持する視覚意味メモリグラフを構築し、予算制約付き粗密探索とサブタスク後のリフレクションによるメモリ更新で、ゼロショットの具現化ナビゲーション性能を向上させた。

詳しい要約

1. どんなもの?

- zero-shot embodied navigation のための効率的で自己進化する fine-grained memory framework である EvoMemNav を提案。 - Visual-Semantic Memory Graph (VSMGraph) を構築し、raw views を first-class memory として保持。 - room-view-object hierarchy で軽量な semantic cues と topological relations により整理。 - 長期計画に必要な細粒度の視覚情報を保持し、曖昧性解消と Stop 検証を可能にする。

2. 先行研究と比べてどこがすごい?

- detector-centric scene graphs は観測を sparse nodes に圧縮し、fine-grained visual evidence を捨て、noise を蓄積する問題があった。 - 3D reconstruction-based methods は計算コストが prohibitive である。 - EvoMemNav は raw views を保持しつつ軽量な semantic cues で整理し、効率と細粒度を両立。 - さらに reflection-driven write-back により retraining なしで環境知識を更新し、将来の意思決定を洗練。

3. 技術・手法の肝は?

- Visual-Semantic Memory Graph (VSMGraph) を構築し、raw views を first-class memory として保持。 - room-view-object hierarchy で軽量な semantic cues と topological relations を組織化。 - budgeted coarse-to-fine policy を導入:coarse stage で検索空間を promising regions に圧縮し、fine stage で VLM を呼び出して対象を検証・決定。 - 各 subtask 後に reflection-driven write-back を実行し、graph-attached priors を更新して累積的な環境知識を符号化。

4. どうやって有効だと検証した?

- GOAT-Bench と HM3D で実験。 - object, text-description, image-goal modalities において SR/SPL の一貫した向上を確認。 - multi-instance disambiguation の改善、premature stops の減少、zero-shot generalization の強化を示す。

5. 議論はある?

- 要旨からは不明。 - ただし、detector-centric scene graphs のノイズ蓄積や 3D reconstruction の計算コストといった課題に対処する点が議論の背景として示唆される。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:detector-centric scene graphs、3D reconstruction-based methods。 - 関連手法:GOAT-Bench、HM3D、VLM。 - 同分野の定番:zero-shot embodied navigation、scene graph、visual-semantic memory。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zuhao Ge, Xiaosong Jia, Chao Wu, Yuchen Zhou, Zuxuan Wu, Yu-Gang Jiang

分類: cs.CV

原文アブストラクト

Building memory is essential for long-horizon planning in zero-shot embodied navigation. Detector-centric scene graphs often compress observations into sparse nodes, discarding fine-grained visual evidence and accumulating noise, while 3D reconstruction-based methods remain computationally prohibitive. We present EvoMemNav, an efficient, self-evolving, fine-grained memory framework for zero-shot embodied navigation. EvoMemNav constructs a Visual-Semantic Memory Graph (VSMGraph) that keeps raw views as first-class memory and organizes them with lightweight semantic cues and topological relations into a room-view-object hierarchy, preserving fine-grained details for disambiguation and Stop verification. To scale to growing memory, we introduce a budgeted coarse-to-fine policy: a coarse stage compresses the search space into promising regions, and a fine stage invokes a VLM only for targeted verification and decision. Beyond static memories, EvoMemNav performs reflection-driven write-back after each subtask, updating graph-attached priors that encode accumulated environmental knowledge to refine future decisions without retraining. Experiments on GOAT-Bench and HM3D across object, text-description, and image-goal modalities show consistent gains in SR/SPL, with better multi-instance disambiguation, fewer premature stops, and stronger zero-shot generalization.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI