日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ナビゲーションarXiv:2605.24111

MASt3R-Nav: 相対3DマップにおけるWayPixelナビゲーション

MASt3R-Nav: WayPixel Navigation in Relative 3D Maps

シェア:XThreadsFacebookLINEはてブBluesky

画像ペア間の相対3D座標系でのピクセル対応に基づくピクセル相対接続性マップを提案し、これをコストマップとして用いて制御器を訓練することで、高精度な視覚ナビゲーションを実現した。

詳しい要約

1. どんなもの?

画像列からpixel-relative connectivityに基づく新たな地図表現を構築し、それを用いたナビゲーションシステムMASt3R-Navを提案する研究。古典的な3D地図はグローバルに一貫した幾何を必要とし、画像/物体相対のトポロジカルグラフは幾何理解をほぼ捨てる代わりにナビゲーション能力がteach-and-repeatに限定される。本研究はpixel-relative connectivityという、幾何的に正確だがグローバル幾何一貫性を必要としない中間的な地図表現を導入する。

2. 先行研究と比べてどこがすごい?

古典的3D地図はグローバル一貫幾何を要求し、画像/物体相対のトポロジカルグラフは幾何理解を犠牲にしてナビゲーション能力がteach-and-repeatに制限される。提案手法はグローバル幾何一貫性を不要としつつ幾何的に正確なpixel-relative connectivityを地図として用いる点で先行研究と異なる。また、相対幾何に基づく密なpixel-level costmapが、image-levelやobject-levelの対応物よりも制御予測のconditioning variableとして正確であることを示す。

3. 技術・手法の肝は?

3D grounded image matchingの最近の進歩に着想を得て、個々の画像ペアの相対3D座標系におけるpixel correspondencesに基づくinter-image connectivityから画像列の地図を構築する。このpixel-level graphを用い、intra-image pixel connectivityを近似・sparsifyすることでグローバル経路計画を行う。そこから'WayPixel Costmap'表現を導出し、それを条件としてtrajectory rolloutを予測するcontrollerを学習する。

4. どうやって有効だと検証した?

シミュレータにおける4種類のナビゲーションタスクと、実世界でのデモンストレーションを通じて検証している。

5. 議論はある?

要旨からは不明。

6. 次に読むべき論文は?

3D grounded image matchingに関する最近の研究、およびimage-level/object-levelの地図表現を用いたナビゲーション手法。具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Vansh Garg, Rohit Jayanti, Krish Pandya, Sarthak Chittawar, Siddharth Tourani, Muhammad Haris Khan, Sourav Garg, Madhava Krishna

分類: cs.RO, cs.AI

原文アブストラクト

Visual navigation ability is strongly tied to its underlying representation of the world. Unlike classical 3D maps that require globally-consistent geometry, image- or object-relative topological graphs almost entirely do away with geometric understanding. But, this comes at the cost of navigation capability, often limiting it to merely teach-and-repeat. In this work, we propose a novel map representation in the form of pixel-relative connectivity, which is geometrically accurate but does not require global geometric consistency. Inspired by recent progress in 3D grounded image matching, we construct a map from an image sequence through inter-image connectivity based on pixel correspondences in the relative 3D coordinate systems of individual image pairs. We then use this pixel-level graph to perform global path planning by approximating and sparsifying intra-image pixel connectivity. Through this, we derive a ''WayPixel Costmap'' representation and train a controller conditioned on it to predict a trajectory rollout. We show that this dense pixel-level costmap based on relative geometry is a more accurate conditioning variable for control prediction than its image- and object-level counterparts. This enables a highly capable navigation system, as validated on four types of navigation tasks in the simulator and through real world demonstrations.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI