日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ナビゲーションarXiv:2607.21400

VoLN: 視覚のみによる長期的ナビゲーション—パラダイム、ベンチマーク、および手法

VoLN: Vision-Only Long-Horizon Navigation---Paradigm, Benchmark, and Method

シェア:XThreadsFacebookLINEはてブBluesky

本論文は、外部からの指示やグローバルな案内に頼らず、局所的に観測可能なシーン内の手がかりのみを用いて目的地へ到達する「視覚のみの長期的ナビゲーション(VoLN)」という新しいタスクを提案し、UAV向けのベンチマークとベースライン手法を提供する。

詳しい要約

1. どんなもの?

本論文は、Vision-and-Language Navigation (VLN) の課題設定を再考し、外部から与えられる指示やグローバルなガイダンスに依存せず、ローカルに観測可能なシーン内の手がかりのみから経路情報を得る新しいタスク、Vision-Only Long-Horizon Navigation (VoLN) を提案している。具体的には、ゴールビューが目的地を指定し、エージェントはオンラインで検出・解釈・選択する必要がある。さらに、航空ナビゲーション向けのベンチマーク VoLN-UAV(7,210エピソード)と、初期ベースラインモデル VoLN-MLLM を提供する。

2. 先行研究と比べてどこがすごい?

従来の VLN は、ルートレベルの指示に方位・距離・レイアウトなどの空間事前情報が暗黙的に含まれており、ベンチマーク性能が視覚ナビゲーション能力とタスク記述から明示的に供給されるルート構造の利用を同時に反映していた。VoLN は、ルート関連情報を外部指示やグローバルガイダンスから、ローカルに観測可能なシーン内の手がかりへと移すことで、より純粋な視覚ナビゲーション能力を評価する補完的な定式化を提供する点が新しい。

3. 技術・手法の肝は?

VoLN-MLLM は、自己教師あり視覚特徴を構造化されたセマンティック空間に整列させ、観測履歴、ゴールビュー、検索された視覚・セマンティックトークン、およびプロプリオセプションから短期的なウェイポイントセグメントを予測する。これにより、長期的な証拠統合、クロスビューゴールマッチング、閉ループ安定性に対処する。

4. どうやって有効だと検証した?

VoLN-UAV ベンチマークの5環境の Test-Unseen スプリットで評価し、Easy、Normal、Hard エピソードでそれぞれ成功率 7.4%、4.5%、1.8% を達成した。これにより、VoLN の初期評価を提供し、残された課題を明らかにしている。

5. 議論はある?

結果は、長期的な証拠統合、クロスビューゴールマッチング、閉ループ安定性に substantial な課題が残ることを示している。成功率が低いことから、現在の手法では VoLN の難しさを十分に克服できていない。また、ベンチマーク設計の妥当性や、他のモダリティとの比較など、さらなる議論の余地がある。

6. 次に読むべき論文は?

要旨からは、関連研究として VLN の既存研究が挙げられる。具体的には、Vision-and-Language Navigation の標準的なベンチマークや手法(例:R2R、RxR)が関連する。また、自己教師あり視覚特徴の利用や、MLLM(Multimodal Large Language Model)ベースのナビゲーション手法も関連する。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jiabin Lou, Haopeng Wang, Yuanshuai Wang, Xinyu Liu, Xuxin Lv, Yuxin Guo, Lei Huang, Rongye Shi, Wenjun Wu

分類: cs.RO, cs.AI

原文アブストラクト

Vision-and-Language Navigation (VLN) enables embodied agents to follow natural-language instructions. However, route-level instructions commonly encode spatial priors, such as orientation, distance, and layout, that are not explicitly available from onboard sensing at deployment in open, GPS-denied environments. Benchmark performance under such interfaces therefore jointly reflects visual navigation ability and the use of route structure explicitly supplied by the task description. As a complementary formulation, we propose Vision-Only Long-Horizon Navigation (VoLN), which shifts route-relevant information from externally supplied instructions and global guidance to locally observable in-scene cues. In VoLN, goal views specify the destination, while route-relevant information is available only through locally observable in-scene cues that the agent must detect, interpret, and select online. We instantiate VoLN for aerial navigation through VoLN-UAV, a 7,210-episode benchmark that combines long-horizon goal-directed flight, continuous 3D motion, large viewpoint changes, and context-dependent beacon selection. We further provide VoLN-MLLM as an initial reference baseline. It aligns self-supervised visual features with a structured semantic space and predicts short-horizon waypoint segments from observation history, goal views, retrieved visual--semantic tokens, and proprioception. On the five-environment Test-Unseen split, it obtains success rates of 7.4%, 4.5%, and 1.8% on Easy, Normal, and Hard episodes, respectively. These results provide an initial evaluation of VoLN and reveal substantial remaining challenges in long-horizon evidence integration, cross-view goal matching, and closed-loop stability. Project page: https://admire-ljb.github.io/VoLN-UAV/

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI