日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

姿勢推定arXiv:2510.10434

MonoSE(3)-Diffusion: 単眼カメラからのロボット姿勢推定のためのSE(3)拡散フレームワーク

MonoSE(3)-Diffusion: A Monocular SE(3) Diffusion Framework for Robust Camera-to-Robot Pose Estimation

シェア:XThreadsFacebookLINEはてブBluesky

単眼画像からのマーカーレスなロボット姿勢推定を条件付き拡散過程として定式化し、視認性制約付き拡散とタイムステップ対応逆過程で高精度かつ頑健な姿勢推定を実現した。

詳しい要約

1. どんなもの?

- 単眼画像からのロボットの6自由度姿勢推定を条件付きデノイジング拡散プロセスとして定式化したMonoSE(3)-Diffusionを提案。 - マーカーレスで画像ベースの姿勢推定を実現するフレームワーク。 - 可視性制約付き拡散プロセスとタイムステップ対応逆プロセスの2つから構成。

2. 先行研究と比べてどこがすごい?

- 従来手法は固定スケールの摂動を用いるが、本手法は拡散プロセスにより視野内で多様な訓練姿勢を生成し、ネットワークの汎化性能を向上。 - 逆プロセスはタイムステップを考慮した洗練スキームにより、直接予測よりも高いロバスト性を実現。 - 最も難しいデータセットでAUC 66.75を達成し、最先端手法に対して32.3%の改善。

3. 技術・手法の肝は?

- 可視性制約付き拡散プロセス:正解姿勢を徐々にノイズ変換し、変換がカメラ視野内に留まるよう制約を統合。 - タイムステップ対応逆プロセス:デノイジングネットワークにより姿勢を反復予測し、現在のタイムステップの拡散後方分布からサンプリングして姿勢推定を洗練。 - スケジュールされた粗から細への手順に従い、タイムステップが変換スケールを示すことでデノイジングネットワークを導き、より正確な姿勢予測を実現。

4. どうやって有効だと検証した?

- 2つのベンチマーク(DREAMとRoboKeyGen)で評価。 - 最も挑戦的なデータセットでAUC 66.75を達成し、最先端手法に対して32.3%のゲインを確認。 - アブレーション実験などの詳細は要旨からは不明。

5. 議論はある?

- 可視性制約付き拡散プロセスが訓練姿勢の多様性と汎化性能を向上させることを議論。 - タイムステップ対応逆プロセスが直接予測よりもロバストであることを議論。 - 限界や失敗事例に関する議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていないが、関連手法として拡散モデル(Diffusion Model)、条件付きデノイジング拡散プロセス、SE(3)姿勢推定、マーカーレス姿勢推定に関する論文が次に読むべき候補。 - 具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kangjian Zhu, Haobo Jiang, Yigong Zhang, Jianjun Qian, Jian Yang, Jin Xie

分類: cs.CV, cs.RO

原文アブストラクト

We propose MonoSE(3)-Diffusion, a monocular SE(3) diffusion framework that formulates markerless, image-based robot pose estimation as a conditional denoising diffusion process. The framework consists of two processes: a visibility-constrained diffusion process for diverse pose augmentation and a timestep-aware reverse process for progressive pose refinement. The diffusion process progressively perturbs ground-truth poses to noisy transformations for training a pose denoising network. Importantly, we integrate visibility constraints into the process, ensuring the transformations remain within the camera field of view. Compared to the fixed-scale perturbations used in current methods, the diffusion process generates in-view and diverse training poses, thereby improving the network generalization capability. Furthermore, the reverse process iteratively predicts the poses by the denoising network and refines pose estimates by sampling from the diffusion posterior of current timestep, following a scheduled coarse-to-fine procedure. Moreover, the timestep indicates the transformation scales, which guide the denoising network to achieve more accurate pose predictions. The reverse process demonstrates higher robustness than direct prediction, benefiting from its timestep-aware refinement scheme. Our approach demonstrates improvements across two benchmarks (DREAM and RoboKeyGen), achieving a notable AUC of 66.75 on the most challenging dataset, representing a 32.3% gain over the state-of-the-art.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI