日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2508.09444

DAgger拡散ナビゲーション:視覚言語ナビゲーションのためのDAgger強化拡散ポリシー

DAgger Diffusion Navigation: DAgger Boosted Diffusion Policy for Vision-Language Navigation

シェア:XThreadsFacebookLINEはてブBluesky

視覚言語ナビゲーション(VLN-CE)において、従来の2段階計画を単一の条件付き拡散ポリシーに統合し、DAggerによるオンライン学習で複合誤差を抑えたエンドツーエンド手法を提案。

詳しい要約

1. どんなもの?

- VLN-CE(Vision-Language Navigation in Continuous Environments)のための新しいナビゲーションポリシー - 従来の2段階(waypoint predictor + navigation planner)を単一のend-to-end diffusion policyに統合した手法「DAgger Diffusion Navigation (DifNav)」 - 連続ナビゲーション空間における未来行動のマルチモーダルな行動分布をconditional diffusion policyで直接モデル化 - waypoint predictorを不要にしつつ、指示追従の多様な行動を捉えることを狙う

2. 先行研究と比べてどこがすごい?

- 既存VLN-CEは2段階のwaypoint planning frameworkが主流で、各段階のproxy objectiveによるglobal sub-optimizationと、1段階目のwaypoint予測品質への強い依存による性能ボトルネックがあった - DifNavはこの2段階を単一のdiffusion policyに統合しend-to-end最適化を実現 - waypoint predictorなしでも、従来のstate-of-the-artな2段階waypointベースモデルをナビゲーション性能で大幅に上回ると報告 - さらにDAggerによるオンライン学習とexpert trajectory augmentationで、模倣学習のcompounding errorと長距離タスクの空間推論を改善

3. 技術・手法の肝は?

- conditional diffusion policyにより連続ナビゲーション空間の未来行動に対するマルチモーダル行動分布を直接モデル化 - waypoint生成とplanningを単一ポリシーに統合し、waypoint predictorを排除 - 模倣学習のcompounding error対策としてDAggerを採用し、オンラインでポリシー訓練とexpert trajectory augmentationを実施 - 集約したデータでポリシーを追加fine-tuneし、エラー状態からの回復能力とロバスト性を向上

4. どうやって有効だと検証した?

- benchmark datasets上での広範な実験により評価 - waypoint predictorを用いない構成でも、従来のstate-of-the-artな2段階waypointベースモデルをナビゲーション性能で大幅に上回ることを示した - 具体的なデータセット名や指標の詳細は要旨からは不明

5. 議論はある?

- 2段階分解のglobal sub-optimizationとwaypoint品質依存という問題を、end-to-end diffusion policyで緩和できると主張 - DAggerによるオンライン訓練とexpert trajectory augmentationがcompounding errorと長距離空間推論に有効と述べる - 定量的なablationや限界・失敗事例の詳細は要旨からは不明

6. 次に読むべき論文は?

- DAgger(Dataset Aggregation)に関する原論文・関連研究 - Diffusion Policy(conditional diffusion policyによる行動生成)の代表的論文 - VLN-CEの2段階waypointベース手法(waypoint predictor + navigation planner)の代表的研究 - 模倣学習におけるcompounding errorに関する研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Haoxiang Shi, Xiang Deng, Zaijing Li, Gongwei Chen, Yaowei Wang, Liqiang Nie

分類: cs.RO, cs.CV

原文アブストラクト

Vision-Language Navigation in Continuous Environments (VLN-CE) requires agents to follow natural language instructions through free-form 3D spaces. Existing VLN-CE approaches typically use a two-stage waypoint planning framework, where a high-level waypoint predictor generates the navigable waypoints, and then a navigation planner suggests the intermediate goals in the high-level action space. However, this two-stage decomposition framework suffers from: (1) global sub-optimization due to the proxy objective in each stage, and (2) a performance bottleneck caused by the strong reliance on the quality of the first-stage predicted waypoints. To address these limitations, we propose DAgger Diffusion Navigation (DifNav), an end-to-end optimized VLN-CE policy that unifies the traditional two stages, i.e. waypoint generation and planning, into a single diffusion policy. Notably, DifNav employs a conditional diffusion policy to directly model multi-modal action distributions over future actions in continuous navigation space, eliminating the need for a waypoint predictor while enabling the agent to capture multiple possible instruction-following behaviors. To address the issues of compounding error in imitation learning and enhance spatial reasoning in long-horizon navigation tasks, we employ DAgger for online policy training and expert trajectory augmentation, and use the aggregated data to further fine-tune the policy. This approach significantly improves the policy's robustness and its ability to recover from error states. Extensive experiments on benchmark datasets demonstrate that, even without a waypoint predictor, the proposed method substantially outperforms previous state-of-the-art two-stage waypoint-based models in terms of navigation performance. Our code is available at: https://github.com/Tokishx/DifNav.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI