日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

深度補完arXiv:2602.03209

未見のフィールドロボティクス環境における極めて疎な深度計測を用いた深度補完

Depth Completion in Unseen Field Robotics Environments Using Extremely Sparse Depth Measurements

シェア:XThreadsFacebookLINEはてブBluesky

合成データで学習し、極めて疎な深度センサ計測から未見のフィールド環境で密なメートル深度を予測する深度補完モデルを提案。

詳しい要約

1. どんなもの?

- フィールドロボティクス環境での深度補完モデルを提案。 - 合成データで訓練し、極めて疎な深度測定から高密度のメートル深度を予測。 - 未見の実環境での展開を目指す。 - リアルタイム性能を組み込みプラットフォームで実現。

2. 先行研究と比べてどこがすごい?

- 従来の単眼深度推定はスケールの手がかりがなく、低テクスチャやデータ不足の問題があった。 - 提案手法は合成データと極疎な深度測定を組み合わせ、未見環境での高密度メートル深度を実現。 - 大規模データセットの不足を合成データ生成パイプラインで補う。 - 組み込み向けリアルタイム性能を達成。

3. 技術・手法の肝は?

- 合成データ生成パイプラインを構築。 - Structure from Motionによるテクスチャ付き3Dメッシュと、新規視点合成を伴うフォトリアリスティックレンダリングを利用。 - 多様なフィールドロボティクスシナリオをシミュレート。 - 極疎な深度測定を入力とし、高密度メートル深度を出力する深度補完モデルを訓練。

4. どうやって有効だと検証した?

- 多様な実世界のフィールドロボティクスシナリオで広範な評価を実施。 - 競争力のある性能を実証。 - Nvidia Jetson AGX Orin上で1フレームあたり53msのエンドツーエンドレイテンシを達成し、リアルタイム展開可能性を確認。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- Structure from Motion - 単眼深度推定 - 深度補完 - 合成データ生成 - フォトリアリスティックレンダリング

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Marco Job, Thomas Stastny, Eleni Kelasidi, Roland Siegwart, Michael Pantic

分類: cs.RO

原文アブストラクト

Autonomous field robots operating in unstructured environments require robust perception to ensure safe and reliable operations. Recent advances in monocular depth estimation have demonstrated the potential of low-cost cameras as depth sensors; however, their adoption in field robotics remains limited due to the absence of reliable scale cues, ambiguous or low-texture conditions, and the scarcity of large-scale datasets. To address these challenges, we propose a depth completion model that trains on synthetic data and uses extremely sparse measurements from depth sensors to predict dense metric depth in unseen field robotics environments. A synthetic dataset generation pipeline tailored to field robotics enables the creation of multiple realistic datasets for training purposes. This dataset generation approach utilizes textured 3D meshes from Structure from Motion and photorealistic rendering with novel viewpoint synthesis to simulate diverse field robotics scenarios. Our approach achieves an end-to-end latency of 53 ms per frame on a Nvidia Jetson AGX Orin, enabling real-time deployment on embedded platforms. Extensive evaluation demonstrates competitive performance across diverse real-world field robotics scenarios.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI