レーダー画像融合による動的物体セグメンテーションと自己運動推定
Image Frame Dynamic Object Segmentation and Ego Motion Estimation using Radar Image Fusion
レーダーのドップラー情報をRGB画像と融合し、自己運動推定と動的物体セグメンテーションを相互に改善するフレームワークRadar-Dotを提案した。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Astik Srivastava, Suhani Grover, Avinash Sharma, Madhava Krishna
分類: cs.CV, cs.RO
原文アブストラクト
Dynamic object segmentation and ego-motion estimation are closely coupled problems in autonomous driving, as accurate ego-motion estimation typically requires static scene observations, while identifying static observations requires knowledge of the ego motion. We present Radar-Dot, a radar--RGB framework that exploits radar Doppler measurements to address this coupling. Radar returns are first used to estimate ego velocity through a linear Doppler constraint, with residual-based static/dynamic segmentation and robust estimation used to reduce the influence of moving objects. The estimated motion is then combined with metric depth and dense optical flow to identify image regions whose observed motion is inconsistent with the rigid scene motion. Experiments on 10 nuScenes scenes (part of nuscenes-mini) demonstrate that the resulting geometric pipeline achieves 20.24% dynamic IoU and 33.67% F1-score over 394 frame pairs, while radar-based static-point filtering improves ego-velocity estimation compared with using all radar returns. These results demonstrate the potential of radar as a modality for jointly improving ego-motion estimation and dynamic object segmentation.
関連論文
- 見えない轍を追う:熱赤外・RGB融合による自己教師ありホイールトラック検出自動運転/センサフュージョン
- 認知型TransFuser:意味論誘導トランスフォーマーによるセンサフュージョンとウェイポイント予測の改善自動運転/センサフュージョン
- TransFuser:トランスフォーマーによるセンサフュージョンを用いた自動運転のための模倣学習自動運転/センサフュージョン
- ADASにおけるマルチセンサフュージョン誤りの検出自動運転/センサフュージョン
