日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ナビゲーションarXiv:2606.07244

ウェイポイントを超えて:視覚言語ナビゲーションのための軌跡中心のウェイポイントパラダイム

Beyond Waypoints: A Trajectory-Centric Waypointing Paradigm for Vision-Language Navigation

シェア:XThreadsFacebookLINEはてブBluesky

連続環境での視覚言語ナビゲーションにおいて、孤立したウェイポイントではなく実行可能な軌跡に基づく新しいウェイポイント予測手法を提案し、計画と制御の一貫性を向上させた。

詳しい要約

1. どんなもの?

- タスク: Vision-Language Navigation in Continuous Environments (VLN-CE) におけるエージェントのナビゲーション - 従来の3段階フレームワーク: waypoint predictor, navigator, low-level controller - 問題点: 分離されたパラダイムにより、到達不能なwaypointや計画と制御の不一致が生じる - 提案: Trajectory Waypoint という新しいパラダイムを導入 - 特徴: 各候補waypointを実行可能なtrajectoryに基づいて接地させる - 構成: Trajectory Waypoint Predictor (TSDF-guided diffusion policy) と trajectory-enhanced navigator - 目的: 到達可能性の保証と高レベル意思決定と低レベル実行の厳密な一貫性

2. 先行研究と比べてどこがすごい?

- 従来のVLN-CEアプローチ: 3段階フレームワークでwaypointを予測し、navigatorが選択、controllerが移動 - 問題: 分離により到達不能なwaypointや計画と制御の不一致が生じる - 提案手法: 孤立したwaypointではなく、実行可能なtrajectoryに基づくwaypointを予測 - 利点: 到達可能性を本質的に保証し、計画と実行の一貫性を実現 - 実験: VLN-CEベンチマークでベースラインを上回る性能を達成

3. 技術・手法の肝は?

- Trajectory Waypoint Predictor: TSDF-guided diffusion policyとして定式化 - 機能: 障害物を避けるようにtrajectory生成を誘導し、予測waypointの到達可能性を保証 - trajectory-enhanced navigator: 関連するtrajectoryを追加情報として計画に注入 - 効果: 高レベル意味決定と低レベル実行の厳密な一貫性を実現

4. どうやって有効だと検証した?

- VLN-CEベンチマークでの広範な実験 - 結果: Trajectory Waypointパラダイムがベースラインを上回る性能を示す

5. 議論はある?

- 従来の分離パラダイムの問題点を指摘 - 提案手法の有効性を実験的に示す - 具体的な議論や限界については要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究: 従来のVLN-CEアプローチ(3段階フレームワーク) - 関連手法: waypoint predictor, navigator, low-level controller, TSDF-guided diffusion policy - 同分野の定番: Vision-Language Navigation (VLN), Continuous Environments (VLN-CE)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Haoxiang Shi, Xiang Deng, Haoyu Zhang, Qiaohui Chu, Yaowei Wang, Liqiang Nie

分類: cs.RO, cs.AI, cs.CV

原文アブストラクト

Vision-Language Navigation in Continuous Environments (VLN-CE) requires agents to follow natural-language instructions while navigating in real-world-like environments. Most VLN-CE approach\-es adopt a three-stage framework: a waypoint predictor proposes navigable waypoints, and a navigator selects the best waypoint, with a low-level controller executing the movement to it. However, this decoupled paradigm often leads to unreachable waypoints or inconsistencies between planning and control. In this work, instead of predicting isolated waypoints, we introduce a novel paradigm called Trajectory Waypoint, which grounds each candidate waypoint in an executable trajectory. To realize this, we design a Trajectory Waypoint Predictor formulated as a TSDF-guided diffusion policy, which steers trajectory generation away from obstacles, inherently ensuring the reachability of the predicted waypoints. We further propose a trajectory-enhanced navigator that injects the associated trajectory as additional information for planning, enabling strict consistency between high-level semantic decisions and low-level execution. Extensive experiments on the VLN-CE benchmark show that our Trajectory Waypoint paradigm achieves superior performance over the baselines.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI