超高速調和:mmWaveレーダーとイベントカメラがドローン着陸を高精度化
Ultra-High-Frequency Harmony: mmWave Radar and Event Camera Orchestrate Accurate Drone Landing
イベントカメラとmmWaveレーダーを組み合わせ、時間的一貫性と空間的相補性を活かした高精度・低遅延のドローン着陸位置推定システムを提案。
著者: Haoyang Wang, Jingao Xu, Xinyu Luo, Xuecheng Chen, Ting Zhang, Ruiyang Duan, Yunhao Liu, Xinlei Chen
分類: cs.RO, cs.CV
原文アブストラクト
For precise, efficient, and safe drone landings, ground platforms should real-time, accurately locate descending drones and guide them to designated spots. While mmWave sensing combined with cameras improves localization accuracy, the lower sampling frequency of traditional frame cameras compared to mmWave radar creates bottlenecks in system throughput. In this work, we replace the traditional frame camera with event camera, a novel sensor that harmonizes in sampling frequency with mmWave radar within the ground platform setup, and introduce mmE-Loc, a high-precision, low-latency ground localization system designed for drone landings. To fully leverage the \textit{temporal consistency} and \textit{spatial complementarity} between these modalities, we propose two innovative modules, \textit{consistency-instructed collaborative tracking} and \textit{graph-informed adaptive joint optimization}, for accurate drone measurement extraction and efficient sensor fusion. Extensive real-world experiments in landing scenarios from a leading drone delivery company demonstrate that mmE-Loc outperforms state-of-the-art methods in both localization accuracy and latency.
関連論文
- SDCM: 車載ネットワークにおけるレーダー・視覚3次元物体検出のための模擬稠密化と補償モデリング融合センサーフュージョン
- CaRLi-V: カメラ・レーダー・LiDAR融合による点単位3D速度推定センサーフュージョン
- カメラによる道路レイアウト抽出を活用したT字路でのmmWaveレーダーによる見通し外歩行者位置推定センサーフュージョン
- 不確かさ駆動型レーダー慣性融合による瞬時3次元自己速度推定センサーフュージョン
- 任意のLiDARをガイドとする拡散事前分布による教師なしレーダー点群強調センサーフュージョン
- 画像と4Dレーダースペクトルの深度認識融合による3D物体検出センサーフュージョン
