日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

3D再構成arXiv:2004.12232

再構成・ラスタライズ・逆伝播:単一画像からの高密度形状と姿勢推定

Reconstruct, Rasterize and Backprop: Dense shape and pose estimation from a single image

シェア:XThreadsFacebookLINEはてブBluesky

単一画像から物体の高密度な3D形状と6自由度姿勢を同時に推定するシステムを提案し、微分可能ラスタライズを再構成ループに組み込むことで姿勢推定精度を大幅に改善した。

著者: Aniket Pokale, Aditya Aggarwal, K. Madhava Krishna

分類: cs.CV, cs.RO, eess.IV

原文アブストラクト

This paper presents a new system to obtain dense object reconstructions along with 6-DoF poses from a single image. Geared towards high fidelity reconstruction, several recent approaches leverage implicit surface representations and deep neural networks to estimate a 3D mesh of an object, given a single image. However, all such approaches recover only the shape of an object; the reconstruction is often in a canonical frame, unsuitable for downstream robotics tasks. To this end, we leverage recent advances in differentiable rendering (in particular, rasterization) to close the loop with 3D reconstruction in camera frame. We demonstrate that our approach---dubbed reconstruct, rasterize and backprop (RRB) achieves significantly lower pose estimation errors compared to prior art, and is able to recover dense object shapes and poses from imagery. We further extend our results to an (offline) setup, where we demonstrate a dense monocular object-centric egomotion estimation system.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI