日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

画像ゴールナビ/ドローンarXiv:2610.36968

全方位視覚でドローンを目標画像へ導く機上ナビゲーション

Omni-IGN: Onboard Image-Goal Navigation for Drones with Omnidirectional Vision

シェア:XThreadsFacebookLINEはてブBluesky

4つの魚眼カメラと強化学習ポリシー、衝突回避層を組み合わせ、未知環境で目標画像の場所へドローンを自律誘導する機上システムを実現した。

詳しい要約

1. どんなもの?

- ドローン向けの Image-goal navigation (ImageNav) システム「Omni-IGN」 - 未知環境で goal image が示す地点へ到達するタスクを対象 - 完全オンボードで動作 - 構成要素 - quad-fisheye 知覚 - attention ベースの reinforcement learning (RL) policy - collision-aware safety layer - 単一視点ではなく全方位視覚を用いる点が特徴

2. 先行研究と比べてどこがすごい?

- 既存の aerial ImageNav 手法は single-view 観測に基づく - 視野外の goal 関連手がかりを探すため回転や探索が追加で必要 - Omni-IGN は quad-fisheye により複数視点を統合 - goal 関連特徴を適応的に融合し連続ナビゲーションの方向指示を得る - 専用 depth sensor なしで ImageNav と障害物回避を両立 - Habitat benchmark で連続行動ベースライン中 best performance - 詳細な比較対象名は要旨からは不明

3. 技術・手法の肝は?

- quad-fisheye RGB 画像による全方位知覚 - attention ベースの RL policy - 複数視点の goal 関連特徴を適応的に融合 - 連続行動のための方向 guidance を生成 - collision-aware safety layer - 学習ベースの depth estimation と組み合わせて衝突回避 - 専用 depth sensor を必要としない設計 - 外部 localization や fine-tuning なしの zero-shot sim-to-real を実現

4. どうやって有効だと検証した?

- Habitat benchmarks - 連続行動ベースライン中で best performance - IsaacSim での flight tests - 学習ベース depth estimation と action safety layer の統合による衝突回避の有効性を検証 - 実世界実験 - fine-tuning や外部 localization なしで zero-shot sim-to-real transfer を実証

5. 議論はある?

- 実世界で zero-shot sim-to-real を達成した点を主張 - 専用 depth sensor なしの障害物回避の実現可能性を示唆 - 具体的な限界・失敗事例・計算資源の定量評価は要旨からは不明 - baseline の詳細や安全性指標の議論は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究 - 既存の aerial ImageNav 手法(single-view ベース) - Habitat benchmarks 上の連続行動ベースライン - 関連手法として挙げられる要素 - attention ベース RL policy - learning-based depth estimation - collision-aware safety layer - 個別論文名は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zichen Yan, Rui Huang, Shenao Wang, Yucong Wang, Nuthasith Gerdpratoom, Lin Zhao

分類: cs.RO

原文アブストラクト

Image-goal navigation (ImageNav) requires an agent to reach a location specified by a goal image in an unknown environment. For drones, this task demands exploration, goal- directed navigation, and collision avoidance under limited onboard computing resources. Existing aerial ImageNav methods are built on single-view observations, requiring additional rotation and exploration to search for goal-relevant cues outside the field of view. In this paper, we present Omni-IGN, a fully onboard ImageNav system that integrates quad-fisheye perception, an attention-based reinforcement learning (RL) policy, and a collision-aware safety layer. The policy adaptively fuses goal-relevant features across multiple views to provide directional guidance for continuous navigation. The quad-fisheye RGB images support both ImageNav and obstacle avoidance without a dedicated depth sensor. On Habitat benchmarks, Omni-IGN achieves the best performance among continuous-action baselines. Moreover, flight tests in IsaacSim validate the effectiveness of integrating learning-based depth estimation with the action safety layer for collision avoidance. Finally, real-world experiments demonstrate zero-shot sim-to-real transfer without any fine-tuning or external localization. The code and model checkpoints will be released upon acceptance.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI