日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

物体姿勢推定arXiv:2606.23634

任意参照からのモデルフリー物体姿勢推定:PANY

Pose Anything Anywhere:Model-free Object Poses from Arbitrary References

シェア:XThreadsFacebookLINEはてブBluesky

CADモデルや追加学習なしで、任意の参照画像から未知物体の6D姿勢を推定する統一フレームワークPANYを提案。RGBとRGB-Dの両対応で、単一または疎な参照ビューから頑健に姿勢を推定する。

詳しい要約

1. どんなもの?

- 未見物体の6D pose推定をmodel-freeで行うPANYを提案。 - RGBとRGB-Dの両入力に対応。 - 1枚または少数のpose-free参照視点で動作。 - 新規物体へ汎化。 - multi-view transformer geometry backboneを基盤とする。

2. 先行研究と比べてどこがすごい?

- model-basedはCAD資産や手間が必要。 - 既存model-freeはpairwise single-anchor matchingに限定。 - 遮蔽や大きな視点変化、低query-reference重複で失敗。 - PANYはview-consistent geometryとcross-view alignmentを学習。 - 広基線や限られた重複でも安定。

3. 技術・手法の肝は?

- multi-view transformer geometry backboneを採用。 - pairwise matchingを超え、view-consistent geometryとcross-view alignment cuesを学習。 - 追加のunposed assist viewsがある場合、pose-graph canonical registrationで集約。 - 幾何カバレッジを増やし最終poseを強化。 - RGB/RGB-D両対応、1枚またはsparse参照で動作。

4. どうやって有効だと検証した?

- 複数ベンチマークでstate-of-the-artを達成。 - 既存model-free手法を大幅に上回る。 - YCB-Vでpose精度+12%改善。 - LM-Oで+20%以上改善。 - single-referenceとsparse-reference両設定で良好。 - 実環境での堅牢性を示す。

5. 議論はある?

- 要旨からは不明。 - 限界や失敗ケース、計算コスト、リアルタイム性への言及はない。 - 追加のunposed assist viewsの取得条件やpose-graph canonical registrationの詳細は不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法としてmodel-based 6D pose estimation、model-free pairwise matching、multi-view transformer、pose-graph registrationが挙げられる。 - 同分野の定番としてYCB-V、LM-Oベンチマークを用いた6D pose推定研究を読むべき。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Hongli Xu, Jiaqi Hu, Junwen Huang, Boyang Zhong, Peter KT Yu, Nassir Navab, Benjamin Busam, Slobodan Ilic

分類: cs.CV

原文アブストラクト

Estimating the 6D pose of unseen objects is a fundamental yet challenging problem for open-world robotics and embodied perception. Model-based methods are accurate but depend on CAD assets or heavy onboarding, while most model-free approaches are still limited to pairwise single-anchor matching and thus fail under occlusion and large viewpoint changes with low query-reference overlap. Therefore, we present PANY, a unified model-free framework that seamlessly supports both RGB and RGB-D inputs, operates on one or sparse pose-free reference views, and generalizes effectively to novel objects. Built on a multi-view transformer geometry backbone, PANY moves beyond pairwise matching by learning view-consistent geometry and cross-view alignment cues that remain stable under wide baselines and limited overlap. When additional unposed assist views are available, PANY aggregates them via pose-graph canonical registration to increase geometric coverage and reinforce the final pose. Extensive experiments show that PANY achieves state-of-the-art performance across multiple benchmarks, substantially outperforming existing model-free methods, improving pose accuracy by +12% on YCB-V and over +20% on LM-O. Furthermore, PANY consistently performs well under both single-reference and sparse-reference settings, demonstrating strong robustness in real-world environments.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI