単一フレームLiDARとカメラ画像の直接的点-ピクセル位置合わせ

- LiDAR point cloud と camera image の間の point-pixel registration を対象とした研究。 - 特に sparse な single-frame LiDAR 設定での modality gap を扱う。 - detector-free matching paradigm を projection-based approach に導入し、LiDAR と camera view 間の直接的な point-pixel matching を行う。 - repeatability scoring mechanism を soft visibility prior として導入する。

- 既存手法は point cloud と image を別々に encode し、hand-crafted または learned な matching strategy に依存していた。 - 既存手法は single-frame LiDAR の sparsity と noise に弱く、point cloud accumulation や追加の prior を要することが多かった。 - 提案手法は detector-free framework を採用し、single-frame LiDAR のみで nuScenes において accumulated point clouds を用いる prior approaches をも上回る state-of-the-art 性能を達成。

- detector-free matching paradigm に着想を得て、projection-based approach を再検討する。 - LiDAR と camera view 間の直接的な point-pixel matching を行う detector-free framework を導入。 - repeatability scoring mechanism を soft visibility prior として機能させ、intensity variation が低い領域の unreliable matches を抑制する。 - これにより sparse 入力下での robustness を向上させる。

- KITTI、nuScenes、MIAS-LCEC-TF70 の benchmark で extensive experiments を実施。 - 提案手法が state-of-the-art performance を達成することを示す。 - nuScenes では single-frame LiDAR のみ使用しているにもかかわらず、accumulated point clouds に依存する prior approaches を上回る。

- 要旨からは不明。 - ただし single-frame LiDAR の sparsity と noise への対処、および intensity variation が低い領域での unreliable matches の抑制が議論の焦点と考えられる。

- detector-free matching paradigms の関連研究。 - projection-based approach の先行研究。 - KITTI、nuScenes、MIAS-LCEC-TF70 を用いた point-pixel registration の prior approaches。 - point cloud accumulation や追加 prior を用いる既存手法。