日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ナビゲーションarXiv:2606.01788

PlatonicNav: プラトニック位相マップによるナビゲーションの意味的対応の解明

PlatonicNav: Unveiling Semantic Correspondence in Navigation with Platonic Topological Maps

シェア:XThreadsFacebookLINEはてブBluesky

視覚のみで構築した位相マップを用いて、言語目標をペアデータなしで接地する訓練不要のナビゲーションフレームワークを提案し、シミュレーションと実機で有効性を示した。

詳しい要約

1. どんなもの?

- 本論文は,embodied visual navigation における vision-and-language navigation (VLN) と object goal navigation (ObjNav) を統一的に扱う PlatonicNav を提案する。 - Platonic Representation Hypothesis を embodied navigation に拡張し,vision-only ObjNav,cross-modal ObjNav,VLN を同一の object-centric semantic manifold への異なるインターフェースとみなす。 - training-free のフレームワークで,Platonic Topological Map が self-supervised visual encoder から得た幾何・意味ノード距離を融合する。 - 言語ゴールは paired vision-language data なしの blind matching で接地する。

2. 先行研究と比べてどこがすごい?

- 従来の VLN と ObjNav の統合は architectural fusion,mixed-task training,large vision-language pretraining のレベルに留まり,独立に訓練された vision/language encoder が共通の意味構造を共有するか検討していなかった。 - 既存の object-centric topological map でも CLIP や large vision-language models による明示的な cross-modal supervision で言語ゴールを接地していた。 - 本研究は purely vision-built map から言語接地が可能かを問い,cross-modal training なしでタスク・モダリティ・embodiment をまたぐ汎化を示す点が新しい。

3. 技術・手法の肝は?

- Platonic Representation Hypothesis を embodied navigation に拡張し,3タスクを同一の object-centric semantic manifold の異なるインターフェースとして再定式化する。 - PlatonicNav は training-free で,Platonic Topological Map が self-supervised visual encoder 由来の geometric distance と semantic node distance を融合する。 - 言語ゴールは paired vision-language data を用いず blind matching で接地する。 - これにより明示的な cross-modal training を必要としない。

4. どうやって有効だと検証した?

- HM3D-IIN,OVON,MP3D 上の R2R-CE といった simulation benchmarks で広範な実験を行う。 - Unitree Go2 への deployment も実施する。 - 結果として,explicit cross-modal training なしにタスク・モダリティ・embodiment をまたぐ汎化を示す。

5. 議論はある?

- 要旨からは,限界や失敗事例,計算コスト,blind matching の誤りに関する議論は明示されていない。 - 議論の詳細は要旨からは不明。

6. 次に読むべき論文は?

- Platonic Representation Hypothesis の原論文。 - CLIP や large vision-language models を用いた cross-modal grounding の研究。 - vision-and-language navigation (VLN) および object goal navigation (ObjNav) の代表的手法。 - self-supervised visual encoder に関する研究。 - ベンチマーク HM3D-IIN,OVON,R2R-CE,MP3D に関連する研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Junlin Long, Zeyu Zhang, Xu Deng, Yiran Wang, Yue Yang, Luke Borgnolo, Maxwell Twelftree, Yang Zhao

分類: cs.CV

原文アブストラクト

Embodied visual navigation, where an agent perceives a complex environment and acts to reach a goal from raw sensory input, underpins a wide range of applications such as household service robotics, assistive robotics, and large-scale autonomous exploration. However, recent attempts to unify vision-and-language navigation (VLN) and object goal navigation (ObjNav) remain at the level of architectural fusion, mixed-task training, and large vision-language pretraining, without examining whether independently trained vision and language encoders may already share a common semantic structure. Moreover, even object-centric topological maps still ground language goals through explicit cross-modal supervision such as CLIP or large vision-language models, leaving open whether such grounding is possible from a purely vision-built map. To address these challenges, we extend the Platonic Representation Hypothesis to embodied navigation and recast vision-only ObjNav, cross-modal ObjNav, and VLN as three different interfaces to the same object-centric semantic manifold. We further introduce PlatonicNav, a training-free framework whose Platonic Topological Map fuses geometric and semantic node distances from a self-supervised visual encoder, and grounds language goals via blind matching without any paired vision-language data. Extensive experiments on simulation benchmarks including HM3D-IIN, OVON, and R2R-CE on MP3D, together with deployment on Unitree Go2, demonstrate that PlatonicNav generalizes across tasks, modalities, and embodiments without explicit cross-modal training. Code: https://github.com/AIGeeksGroup/PlatonicNav. Website: https://aigeeksgroup.github.io/PlatonicNav.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI