日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

姿勢推定arXiv:2508.15972

UnPose: 不確実性誘導拡散事前分布によるゼロショット姿勢推定

UnPose: Uncertainty-Guided Diffusion Priors for Zero-Shot Pose Estimation

シェア:XThreadsFacebookLINEはてブBluesky

事前学習済み拡散モデルの3D事前分布と不確実性推定を活用し、CADモデル不要で新規物体の6D姿勢推定と3D再構成をゼロショットで行うフレームワークを提案。

詳しい要約

1. どんなもの?

- 新規物体の6D pose estimationと3D reconstructionを、CADモデルなし・追加学習なしで行うzero-shotフレームワーク「UnPose」 - 単一視点のRGB-Dフレームを入力とする - pre-trained diffusion modelの3D priorとuncertainty推定を活用 - 3D Gaussian Splatting (3DGS) 表現で物体を再構成 - ロボティクスにおけるmodel-freeなpose estimation手法

2. 先行研究と比べてどこがすごい?

- 従来はCADモデル取得が高コスト・非実用的 - 近年のfoundation model priorによる再構成手法は追加学習を要したり、hallucinated geometryを生む問題があった - UnPoseは追加学習なしで、diffusion modelのuncertaintyを利用することでこれらの課題に対処 - 具体的な精度比較数値は要旨からは不明

3. 技術・手法の肝は?

- 単一視点RGB-Dからmulti-view diffusion modelで初期3Dモデルを3DGSで構築 - 同時にpixel-wise epistemic uncertaintyを推定 - 新たな観測が得られるたびに、diffusion modelのuncertaintyに導かれて新視点を融合し3DGSを逐次refine - グローバル整合性のため、diffusion prior生成視点と後続観測をpose graphに統合し、一貫した3DGS fieldへjoint optimization

4. どうやって有効だと検証した?

- 6D pose estimation精度と3D reconstruction品質の両面で既存手法を大幅に上回ることを実験で示した - 具体的なデータセット名・指標・数値は要旨からは不明 - 実世界のrobotic manipulationタスクでの実用性も提示

5. 議論はある?

- diffusion modelのhallucinated geometry問題への対処としてuncertainty-guided fusionを採用 - 逐次観測によるrefineとpose graph最適化でglobal consistencyを確保 - 限界・失敗ケース・計算コストなどの詳細な議論は要旨からは不明

6. 次に読むべき論文は?

- multi-view diffusion model(3D prior生成の基盤) - 3D Gaussian Splatting (3DGS) - foundation model priorを用いたsingle/multi-view再構成によるpose estimationの先行手法 - pose graph optimization - 具体的な論文名は要旨に記載なし

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhaodong Jiang, Ashish Sinha, Tongtong Cao, Yuan Ren, Bingbing Liu, Binbin Xu

分類: cs.RO, cs.CV

原文アブストラクト

Estimating the 6D pose of novel objects is a fundamental yet challenging problem in robotics, often relying on access to object CAD models. However, acquiring such models can be costly and impractical. Recent approaches aim to bypass this requirement by leveraging strong priors from foundation models to reconstruct objects from single or multi-view images, but typically require additional training or produce hallucinated geometry. To this end, we propose UnPose, a novel framework for zero-shot, model-free 6D object pose estimation and reconstruction that exploits 3D priors and uncertainty estimates from a pre-trained diffusion model. Specifically, starting from a single-view RGB-D frame, UnPose uses a multi-view diffusion model to estimate an initial 3D model using 3D Gaussian Splatting (3DGS) representation, along with pixel-wise epistemic uncertainty estimates. As additional observations become available, we incrementally refine the 3DGS model by fusing new views guided by the diffusion model's uncertainty, thereby continuously improving the pose estimation accuracy and 3D reconstruction quality. To ensure global consistency, the diffusion prior-generated views and subsequent observations are further integrated in a pose graph and jointly optimized into a coherent 3DGS field. Extensive experiments demonstrate that UnPose significantly outperforms existing approaches in both 6D pose estimation accuracy and 3D reconstruction quality. We further showcase its practical applicability in real-world robotic manipulation tasks.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI