FIReStereo: 視界不良環境におけるUAS深度知覚のための森林赤外ステレオデータセット
FIReStereo: Forest InfraRed Stereo Dataset for UAS Depth Perception in Visually Degraded Environments
煙・雨・夜間など視界が悪い環境でも使えるよう、熱赤外ステレオカメラとLiDAR・IMUで都市・森林を撮影した大規模データセットを構築し、代表的なステレオ深度推定手法を評価した。
著者: Devansh Dhrafani, Yifei Liu, Andrew Jong, Ukcheol Shin, Yao He, Tyler Harp, Yaoyu Hu, Jean Oh, Sebastian Scherer
分類: cs.CV, cs.AI, cs.RO
原文アブストラクト
Robust depth perception in visually-degraded environments is crucial for autonomous aerial systems. Thermal imaging cameras, which capture infrared radiation, are robust to visual degradation. However, due to lack of a large-scale dataset, the use of thermal cameras for unmanned aerial system (UAS) depth perception has remained largely unexplored. This paper presents a stereo thermal depth perception dataset for autonomous aerial perception applications. The dataset consists of stereo thermal images, LiDAR, IMU and ground truth depth maps captured in urban and forest settings under diverse conditions like day, night, rain, and smoke. We benchmark representative stereo depth estimation algorithms, offering insights into their performance in degraded conditions. Models trained on our dataset generalize well to unseen smoky conditions, highlighting the robustness of stereo thermal imaging for depth perception. We aim for this work to enhance robotic perception in disaster scenarios, allowing for exploration and operations in previously unreachable areas. The dataset and source code are available at https://firestereo.github.io.
関連論文
- WHTMix: ウォルシュ・アダマール変換による効率的なステレオ深度推定ステレオ深度推定
- FoundationStereo: ゼロショットステレオマッチングの基盤モデルステレオ深度推定
- Bi3D: 二値分類によるステレオ深度推定ステレオ深度推定
- DPSNet:エンドツーエンドのディーププレーンスイープステレオステレオ深度推定
- 自己運動を利用した探索空間削減による高密度視差推定ステレオ深度推定
