日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ナビゲーションarXiv:2606.06147

WorldFly: UAVナビゲーションのためのワールドモデル基盤の視覚言語行動モデル

WorldFly: A World-Model-Based Vision-Language-Action Model for UAV Navigation

シェア:XThreadsFacebookLINEはてブBluesky

UAVナビゲーションのための新しいVLAフレームワークで、将来の映像予測と行動を同時生成するデュアルブランチ結合フローマッチング機構を導入し、空間想像による意思決定を強化する。

詳しい要約

1. どんなもの?

- 目的: UAV navigation における end-to-end Vision-Language-Action (VLA) モデルの課題解決。 - 提案: WorldFly という world-model-based VLA framework。 - 特徴: dual-branch coupled flow matching により future video predictions と navigation actions を同時生成。 - 対象: dense urban environments での occlusions や sharp turns による viewpoint transitions に対応。

2. 先行研究と比べてどこがすごい?

- 先行: 既存 VLA は historical observations から直接 actions を予測。 - 課題: dense urban environments で severe occlusions や sharp turns により性能低下。 - 優位: World Models の future states 想像能力を活用し、partial observability 下で robust decision-making を実現。 - 結果: 特に unseen environments で baselines を上回る。

3. 技術・手法の肝は?

- 核: world-model-based VLA framework。 - 機構: dual-branch coupled flow matching。 - 機能: future video predictions と navigation actions を jointly generate。 - 効果: spatial imagination を介して agent の policy を明示的に guide。

4. どうやって有効だと検証した?

- ベンチマーク: Urban Canyon Traversal Benchmark を構築。 - 設計: severe occlusions と drastic viewpoint transitions 下での spatial understanding を評価。 - 評価: このベンチマークで extensive evaluations を実施。 - 結果: WorldFly が他の baselines を上回り、特に unseen environments で有効性を確認。

5. 議論はある?

- 主張: World Models の統合が embodied aerial agents に有効。 - 限界: 要旨からは不明。 - 議論: 要旨からは不明。

6. 次に読むべき論文は?

- 関連: World Models を活用した VLA モデル。 - 比較: 既存の end-to-end VLA アプローチ。 - ベンチマーク: Urban Canyon Traversal Benchmark。 - 手法: dual-branch coupled flow matching。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Shengtao Zheng, Kai Li, Weichen Zhang, Yu Meng, Chen Gao, Xinlei Chen, Yong Li, Xiao-Ping Zhang

分類: cs.AI

原文アブストラクト

End-to-end Vision-Language-Action (VLA) models have shown promise in UAV navigation. However, existing approaches typically rely on historical observations to directly predict actions, often struggling in dense urban environments where severe occlusions and sharp turns result in drastic viewpoint transitions. We argue that the ability to "imagine" future states -- inherent in World Models -- is critical for robust decision-making under such partial observability. To address this, we construct a challenging Urban Canyon Traversal Benchmark, specifically designed to evaluate spatial understanding in scenarios characterized by severe occlusions and drastic viewpoint transitions. To this end, we propose WorldFly, a novel world-model-based VLA framework that employs a dual-branch coupled flow matching mechanism to jointly generate future video predictions and navigation actions, thereby explicitly guiding the agent's policy via spatial imagination. Extensive evaluations on our benchmark demonstrate that WorldFly outperforms other baselines, particularly in unseen environments, validating the effectiveness of integrating world models into embodied aerial agents.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI