日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

視覚ナビゲーションarXiv:2511.22609

MG-Nav: 疎な空間メモリによる二段階スケールの視覚ナビゲーション

MG-Nav: Dual-Scale Visual Navigation via Sparse Spatial Memory

シェア:XThreadsFacebookLINEはてブBluesky

領域ごとに多視点のキーフレームと物体意味を集約した疎な空間メモリグラフを用い、大域的な記憶誘導計画と局所的な幾何制御を組み合わせてゼロショット視覚ナビゲーションを実現した研究。

詳しい要約

1. どんなもの?

- ゼロショット視覚ナビゲーションのための dual-scale フレームワーク MG-Nav (Memory-Guided Navigation) を提案 - グローバルな memory-guided planning とローカルな geometry-enhanced control を統合 - 中核は Sparse Spatial Memory Graph (SMG): 各ノードが multi-view keyframe と object semantics を集約する region-centric なコンパクト記憶 - グローバルでは SMG 上で自己位置推定し、image-to-instance hybrid retrieval で goal-conditioned なノード経路を計画 - ローカルでは navigation foundation policy が waypoint を point-goal mode で実行し、最終ノードからは image-goal mode に切替 - VGGT-adapter により観測と goal の特徴を shared 3D-aware…

2. 先行研究と比べてどこがすごい?

- ゼロショット設定で HM3D Instance-Image-Goal と MP3D Image-Goal の benchmark において state-of-the-art を達成 - 動的な再配置 (dynamic rearrangements) や未見シーン条件でも robust と報告 - グローバル計画とローカル制御を異なる周波数で動かし、periodic re-localization で誤差を補正する設計 - 具体的な比較対象の先行研究名は要旨からは不明 - 単一スケールではなく dual-scale で長距離誘導と局所障害物回避を両立させる点が特徴

3. 技術・手法の肝は?

- Sparse Spatial Memory Graph (SMG): region-centric でコンパクトな記憶。ノードが multi-view keyframe と object semantics を集約し、見た目と空間構造を保持しつつ視点多様性を維持 - グローバル: SMG 上での localization と image-to-instance hybrid retrieval による goal-conditioned ノード経路計画で到達可能 waypoint 列を生成 - ローカル: navigation foundation policy が point-goal mode で obstacle-aware control を実行し、最終ノードから visual target へは image-goal mode に切替 - VGGT-adapter: 事前学習済み VGGT 上に構築した軽量 geometric module で、観測と goal の特徴を shared 3D-aware space に整列 - グローバル計画とローカル制御を異なる周波数で運…

4. どうやって有効だと検証した?

- HM3D Instance-Image-Goal と MP3D Image-Goal の benchmark で評価 - ゼロショット性能で state-of-the-art を達成したと報告 - dynamic rearrangements と unseen scene conditions 下での robustness を確認 - 具体的な ablation や指標の詳細は要旨からは不明

5. 議論はある?

- dynamic rearrangements や未見シーンへの robustness が主張されているが、限界や失敗事例の詳細は要旨からは不明 - periodic re-localization の頻度や誤差補正の感度に関する議論は要旨からは不明 - VGGT-adapter の寄与度や計算コストの議論は要旨からは不明 - SMG のノード設計・更新則の詳細は要旨からは不明

6. 次に読むべき論文は?

- VGGT (事前学習済み geometric model、VGGT-adapter の基盤) - navigation foundation policy に関する研究 (具体的名称は要旨からは不明) - HM3D Instance-Image-Goal benchmark 関連のゼロショット視覚ナビゲーション研究 - MP3D Image-Goal benchmark 関連の研究 - image-goal navigation および point-goal navigation の定番手法

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Bo Wang, Jiehong Lin, Chenzhi Liu, Xinting Hu, Yifei Yu, Tianjia Liu, Zhongrui Wang, Xiaojuan Qi

分類: cs.CV, cs.RO

原文アブストラクト

We present MG-Nav (Memory-Guided Navigation), a dual-scale framework for zero-shot visual navigation that unifies global memory-guided planning with local geometry-enhanced control. At its core is the Sparse Spatial Memory Graph (SMG), a compact, region-centric memory where each node aggregates multi-view keyframe and object semantics, capturing both appearance and spatial structure while preserving viewpoint diversity. At the global level, the agent is localized on SMG and a goal-conditioned node path is planned via an image-to-instance hybrid retrieval, producing a sequence of reachable waypoints for long-horizon guidance. At the local level, a navigation foundation policy executes these waypoints in point-goal mode with obstacle-aware control, and switches to image-goal mode when navigating from the final node towards the visual target. To further enhance viewpoint alignment and goal recognition, we introduce VGGT-adapter, a lightweight geometric module built on the pre-trained VGGT model, which aligns observation and goal features in a shared 3D-aware space. MG-Nav operates global planning and local control at different frequencies, using periodic re-localization to correct errors. Experiments on HM3D Instance-Image-Goal and MP3D Image-Goal benchmarks demonstrate that MG-Nav achieves state-of-the-art zero-shot performance and remains robust under dynamic rearrangements and unseen scene conditions.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI