日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

UAV追跡/シミュレーションarXiv:2605.19120

CosFly: マトリックスで計画し、世界で飛ぶ

CosFly: Plan in the Matrix, Fly in the World

シェア:XThreadsFacebookLINEはてブBluesky

空中追跡のためのボックス構造計画とマルチモーダルシミュレーションパイプライン、および多様な環境での動的ターゲット追跡用の大規模UAVデータセットCosFly-Trackを提案する。

詳しい要約

1. どんなもの?

CosFlyは、aerial tracking向けのbox-structuredなplanningとmultimodal simulationのpipelineであり、CosFly-Trackは都市中心部、高速道路、田園、森林、海岸の町を含む多様な環境での動的target tracking用の大規模UAV datasetである。 - 現在の実装はCARLA上で、7-stepのmodular pipelineを提供する。 - 複雑な3D worldをplanning用の構造化obstacle表現に変換し、得られたtrajectoryをRGB画像、高精度depth map、semantic segmentation mask、自然言語navigation指示を含むmultimodal sensor dataに投影する。 - 設定可能なfixed-FOV zoom levelをサポートし、trajectoryごとに1つのFOV設定を選び一定に保つことで、camera-intrinsic調整を通じて様々なfocal lengthをsimulateできる。 - 公開されるCosFly-Track…

2. 先行研究と比べてどこがすごい?

要旨からは不明。 - 先行研究との具体的な比較や優位性の記述は要旨に含まれていない。 - ただし、box-structured planningとmultimodal simulationを組み合わせ、fixed-FOV zoom levelを設定可能にした点、および6-DOF pose annotation付きの大規模UAV datasetを公開する点が特徴として挙げられている。

3. 技術・手法の肝は?

技術や手法の肝は以下の通り。 - CARLA上でのmodular 7-step construction pipeline。 - 3D map exportからgrid simplification、pedestrianとdroneのtrajectory planning、6-DOF pose annotation付きmultimodal rendering、quality inspection、teacher-student caption generationまでの完全なworkflowをカバーする。 - aerial target trackingのための2つのtrajectory-planning paradigmを分析する。 - 従来のtwo-stage pipeline:front-end candidate generationとbackend refinement。 - 直接的なgradient-based formulation:複数のtracking constraintを単一のobjectiveで最適化する。 - fixed-FOV zoom levelの…

4. どうやって有効だと検証した?

要旨からは不明。 - 有効性の検証方法についての具体的な記述は要旨に含まれていない。 - ただし、公開されるCosFly-Trackには250の検証済みtrajectoryと約100,000枚のrendered imageが含まれると述べられている。

5. 議論はある?

要旨からは不明。 - 議論や限界、課題についての具体的な記述は要旨に含まれていない。 - ただし、pipelineとdatasetがaerial-ground collaborative researchのためのscalable foundationを確立し、動的target tracking、UAV navigation、multimodal perceptionを多様な環境で支援すると述べられている。

6. 次に読むべき論文は?

要旨で参照/比較されている研究は明示されていない。 - 関連手法として、CARLAが挙げられる。 - 同分野の定番として、UAV target tracking、UAV navigation、multimodal perceptionに関する研究が考えられるが、具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Hanxuan Chen, Xiangyue Wang, Songsheng Cheng, Ruilong Ren, Jie Zheng, Shuai Yuan, Tianle Zeng, Hanzhong Guo, Binbo Li, Kangli Wang, Ji Pei

分類: cs.RO

原文アブストラクト

We present CosFly, a box-structured planning and multimodal simulation pipeline for aerial tracking, together with CosFly-Track, a large-scale UAV dataset for dynamic target tracking across diverse environments including urban centers, highways, rural landscapes, forests, and coastal towns. In our current implementation on CARLA, CosFly provides a modular 7-step construction pipeline that converts complex 3D worlds into structured obstacle representations for planning, then projects the resulting trajectories back into multi-modal sensor data -- including RGB images, high-precision depth maps, and semantic segmentation masks -- paired with natural language navigation instructions. A key feature is the support for configurable fixed-FOV zoom levels (one FOV setting drawn per trajectory and held constant throughout), enabling simulation of various focal lengths through camera-intrinsic adjustments. The pipeline covers the complete workflow from 3D map export through grid simplification, pedestrian and drone trajectory planning, multi-modal rendering with 6-DOF pose annotations, quality inspection, and teacher-student caption generation. We analyze two trajectory-planning paradigms for aerial target tracking: a conventional two-stage pipeline with front-end candidate generation and backend refinement, and a direct gradient-based formulation that optimizes multiple tracking constraints in a single objective. The public CosFly-Track release contains 250 validated trajectories and approximately 100,000 rendered images with complete 6-DOF drone pose annotations (position x, y, z and orientation yaw, pitch, roll). Together, the pipeline and dataset establish a scalable foundation for aerial-ground collaborative research, supporting dynamic target tracking, UAV navigation, and multi-modal perception across diverse environments.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI