日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

深度推定/データセットarXiv:2605.24074

WideDepth: 魚眼深度推定のためのミリメートル精度ベンチマーク

WideDepth: Millimeter-Accurate Benchmark for Fisheye Depth Estimation

シェア:XThreadsFacebookLINEはてブBluesky

魚眼カメラ用の屋内深度推定データセットとベンチマークを新たに構築し、ピンホール学習モデルを魚眼画像に適応させる手法と、高解像度LiDARスキャンに基づく魚眼ステレオ画像生成パイプラインを提案した。

詳しい要約

1. どんなもの?

- 魚眼カメラの屋内深度推定ベンチマーク - 初の屋内魚眼深度推定データセットWideDepth - 101シーン、5K高解像度ステレオペア - ミリメートル精度のground truth深度とdisparity - ピンホールと魚眼のペアサンプルを含む - 水平・垂直ステレオ設定、異なるFOVとbaseline - 18KのLiDAR由来スパース深度訓練サンプルも提供

2. 先行研究と比べてどこがすごい?

- 従来の屋内深度ベンチマークは魚眼カメラに対応していない - 正確なground truthが欠如していた - WideDepthは初の魚眼深度推定用屋内データセット - ミリメートルレベルの精度を実現 - 多様なFOVとbaseline、ステレオ設定をカバー - ピンホールモデルの魚眼適応手法を提案

3. 技術・手法の肝は?

- ピンホール訓練済みステレオモデルを魚眼画像に適応させる手法 - 高解像度LiDARスキャンに基づくステレオ魚眼画像生成パイプライン - これらを用いて最先端の単眼深度、ステレオマッチング、深度補完モデルを評価 - LiDAR由来のスパース深度訓練サンプルを活用したファインチューニング

4. どうやって有効だと検証した?

- 最先端の単眼深度、ステレオマッチング、深度補完モデルをベンチマークで評価 - ピンホールベースのステレオモデルをファインチューニングすることで魚眼データで最大62%の性能向上を達成 - 18KのLiDAR由来スパース深度訓練サンプルを提供し有効性を検証

5. 議論はある?

- 魚眼深度推定とロボティクス知覚の研究を進展させる基盤を提供 - 高精度で多用途なベンチマークの重要性を強調 - 具体的な議論や限界については要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:単眼深度推定、ステレオマッチング、深度補完の最先端モデル - 関連手法:ピンホールベースのステレオモデル、LiDARスキャンを用いた生成パイプライン - 同分野の定番:魚眼カメラキャリブレーション、屋内深度推定ベンチマーク

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ilia Indyk, Ignat Penshin, Ivan Sosin, Maxim Monastyrny, Aleksei Valenkov, Ilya Makarov

分類: cs.CV, cs.RO

原文アブストラクト

Fisheye cameras are increasingly adopted in robotics for near-field manipulation, navigation, and immersive perception, yet indoor depth benchmarks with accurate ground truth are still missing. To address this, we introduce WideDepth - the first indoor dataset for fisheye depth estimation, featuring 101 scenes containing 5K high-resolution stereo pairs labeled with millimeter-level ground truth depth and disparity. Our dataset also includes paired pinhole and fisheye samples across varying fields of view and baselines in both horizontal and vertical stereo setups. We further propose a method to adapt pinhole-trained stereo models to fisheye images and introduce a novel stereo fisheye image generation pipeline based on high-resolution LiDAR scans. Leveraging these methods, we thoroughly evaluate state-of-the-art monocular depth, stereo matching, and depth completion models on our benchmark. Additionally, we provide 18K LiDAR-derived sparse depth training samples, achieving up to a 62% performance boost on fisheye data when fine-tuning pinhole-based stereo models. In summary, the high precision and versatility of our benchmark set a strong foundation for advancing research in fisheye depth estimation and robotics perception. Project page: https://ilyaind.github.io/WideDepth

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI