日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

姿勢推定arXiv:2609.07231

平面ベースのガウススプラッティングによるテクスチャレス物体の汎用6D姿勢推定

Generalizable 6D Pose Estimation of Textureless Objects with Planar-based Gaussian Splatting

シェア:XThreadsFacebookLINEはてブBluesky

CADモデルを使わずにテクスチャのない物体の6D姿勢を推定するため、平面ベースのガウススプラッティングで再構成した3D表現と幾何駆動の姿勢最適化を組み合わせたフレームワークPG-Poseを提案した。

詳しい要約

1. どんなもの?

PG-Poseは、CADモデルを必要とせずにテクスチャレス物体の6D姿勢推定を行うためのフレームワークである。オフラインで多視点の参照RGB画像から物体の3D表現を抽出し、オンラインで入力画像の初期姿勢を推定した後、反復的な姿勢最適化を行う。

2. 先行研究と比べてどこがすごい?

従来の一般化可能な手法は低テクスチャ物体に対して幾何学的制約が不十分で性能が限られていた。PG-PoseはPlanar-based Gaussian Splatting (PGS)を用いて高忠実度の深度マップを生成し、3D点群を再構成することで、より強い幾何学的制約を提供し、SOTAのGSベース手法と比較して平均精度を2.1%向上させた。

3. 技術・手法の肝は?

手法の肝は、オフラインでのPGSによる3D Gaussian表現の再構成と、それに基づく深度マップのレンダリング、およびバックプロジェクションによる3D点群の生成である。オンラインでは、入力画像と3D点群間の2D-3D対応マッチングで初期姿勢を推定し、PGS-Refinerによる反復的な姿勢最適化を行う。

4. どうやって有効だと検証した?

OnePose-LowTextureデータセットで評価し、ADD(S)@0.1dで平均精度94.2%を達成し、SOTAのGSベース手法と比較して平均精度が2.1%向上した。さらに、デュアルアーム産業用ロボットに実装し、未見物体の把持タスクを成功させた。

5. 議論はある?

要旨からは、提案手法の限界や他のシーンでの性能などに関する議論は不明。ただし、産業用ロボットでの実証により実用性が示されているが、計算コストや一般化の範囲については言及がない。

6. 次に読むべき論文は?

要旨で参照されているOnePose-LowTextureデータセットや、比較対象であるGSベースの手法(具体的な名称は不明)に関連する論文が挙げられる。また、一般化可能な6D姿勢推定の分野では、OnePoseやFoundationPoseなどの関連研究が考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jie Lu, Hengtan Zhang, Li Gong, Pengpeng Wang, Xianjia Yu, Jinxiang Deng, Tomi Westerlund, Zhongxue Gan, Lirong Zheng, Zhuo Zou

分類: cs.RO

原文アブストラクト

Estimating the 6D pose of textureless objects without prior CAD models remains a critical challenge due to the lack of appearance features. While recent generalizable approaches alleviate the dependence on object-specific models, their performance on low-texture objects is often limited by insufficient geometric constraints in the underlying representations. In this work, we propose PG-Pose, a geometry-aware framework combining Planar-based Gaussian Splatting (PGS) reconstruction and Geometry-driven pose optimization. In the offline representation extraction stage, three distinct representations of the object are extracted from multi-view reference RGB images with known poses. PG-Pose reconstructs a 3D Gaussian representation and renders high-fidelity depth maps to generate 3D point clouds through back projection. In the online pose inference stage, the initial pose of the input image is estimated by 2D-3D correspondence matching between the input image and the reconstructed 3D point clouds, followed by a PGS-Refiner for iterative pose optimization. Evaluations on the OnePose-LowTexture datasets, PG-Pose achieves an average accuracy of 94.2% ADD(S)@0.1d, with a 2.1% improvement average accuracy compared with the state-of-the-art (SOTA) GS-based approach. To further demonstrate the effectiveness of PG-Pose for industrial robots in grasping tasks, we deploy it on a dual-arm industrial robot and successfully realize the grasping task on an unseen object.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI