日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ナビゲーションarXiv:2512.09607

UrbanNav: ウェブ規模の人間軌跡から学ぶ言語誘導型都市ナビゲーション

UrbanNav: Learning Language-Guided Urban Navigation from Web-Scale Human Trajectories

シェア:XThreadsFacebookLINEはてブBluesky

ウェブ上の街歩き動画1500時間以上と300万組の指示・軌跡・ランドマークデータを用い、自由な言語指示に従って実都市を移動する具現化エージェントを訓練するフレームワークを提案した。

詳しい要約

1. どんなもの?

- 言語指示に従い都市環境を歩行する embodied agent 向けの学習フレームワーク UrbanNav を提案。 - web-scale の city walking videos を活用し、人間のナビゲーション軌跡と言語指示を実世界の landmark に紐づける scalable annotation pipeline を構築。 - 1,500 時間以上のナビゲーションデータと 300 万の instruction-trajectory-landmark triplets を含む。 - 複雑な都市シナリオに対応する robust な navigation policy を学習し、noisy instructions への頑健性や未見都市への汎化を示す。

2. 先行研究と比べてどこがすごい?

- 従来の visual navigation は simulated または off-street 環境に限定され、特定の座標や画像など precise goal formats に依存しがち。 - UrbanNav は free-form language instructions を多様な都市設定で扱い、last-mile delivery robots のような自律エージェントへの適用を目指す。 - web-scale の都市歩行ビデオから大規模データを構築し、既存手法を大幅に上回る性能を報告。

3. 技術・手法の肝は?

- web-scale city walking videos を利用し、人間のナビゲーション軌跡と言語指示を実世界 landmark に整合させる scalable annotation pipeline を開発。 - 1,500 時間超・300 万 triplets のデータセットを構築し、多様な都市シナリオをカバー。 - このデータで navigation policy を学習し、複雑な都市環境での spatial reasoning と noisy instructions への頑健性を獲得。

4. どうやって有効だと検証した?

- 実験結果により、UrbanNav が既存手法を有意に上回ることを示す。 - 複雑な都市シナリオでの spatial reasoning、noisy instructions への頑健性、未見都市設定への汎化を評価。 - 具体的な評価指標やベースラインの詳細は要旨からは不明。

5. 議論はある?

- 大規模 web ビデオデータが言語誘導型の実世界都市ナビゲーションを可能にする可能性を強調。 - 限界や倫理的懸念、データバイアスなどについての議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない。 - 関連手法として visual navigation、embodied agent、language-guided navigation、last-mile delivery robots などの同分野の定番が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yanghong Mei, Yirong Yang, Longteng Guo, Qunbo Wang, Ming-Ming Yu, Xingjian He, Wenjun Wu, Jing Liu

分類: cs.RO, cs.CV

原文アブストラクト

Navigating complex urban environments using natural language instructions poses significant challenges for embodied agents, including noisy language instructions, ambiguous spatial references, diverse landmarks, and dynamic street scenes. Current visual navigation methods are typically limited to simulated or off-street environments, and often rely on precise goal formats, such as specific coordinates or images. This limits their effectiveness for autonomous agents like last-mile delivery robots navigating unfamiliar cities. To address these limitations, we introduce UrbanNav, a scalable framework that trains embodied agents to follow free-form language instructions in diverse urban settings. Leveraging web-scale city walking videos, we develop an scalable annotation pipeline that aligns human navigation trajectories with language instructions grounded in real-world landmarks. UrbanNav encompasses over 1,500 hours of navigation data and 3 million instruction-trajectory-landmark triplets, capturing a wide range of urban scenarios. Our model learns robust navigation policies to tackle complex urban scenarios, demonstrating superior spatial reasoning, robustness to noisy instructions, and generalization to unseen urban settings. Experimental results show that UrbanNav significantly outperforms existing methods, highlighting the potential of large-scale web video data to enable language-guided, real-world urban navigation for embodied agents.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI