日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ポーズ推定arXiv:2607.15058

SUFLECA: CADと画像の位置合わせのための特徴学習の大規模化

SUFLECA: Scaling Up Feature Learning for CAD-to-image Alignment

シェア:XThreadsFacebookLINEはてブBluesky

CADモデルと単一RGB画像の9Dポーズ(回転・並進・異方性スケール)を推定するゼロショット手法を提案。大規模なNOC教師付き学習で幾何学的特徴を獲得し、幾何学的整合性のあるマッチングで高精度な位置合わせを実現した。

詳しい要約

1. どんなもの?

SUFLECAは、単一のRGB画像から物体の9Dポーズ(回転・並進・異方性スケール)を推定するCAD-to-image alignmentのための弱教師ありフレームワークである。ゼロショット設定で動作し、ロボティクスや拡張現実への応用を目指す。

2. 先行研究と比べてどこがすごい?

従来のゼロショット手法は視覚的基盤モデルを用いて画像領域とCADモデルを対応付けるが、外観ベースの対応はオクルージョンやsim-to-realドメインギャップに弱い。SUFLECAは、幾何学的に基づく特徴学習を大規模にスケールアップし、幾何学的に一貫したマッチングアルゴリズムを導入することで、これらの限界を克服し、より高精度で計算効率の良いアライメントを実現する。

3. 技術・手法の肝は?

手法の肝は2点。(1) 事前学習済み視覚表現から幾何学的に基づく特徴学習をスケールアップする点。674K枚の画像(12の実・合成データセット)を用いてNormalized Object Coordinates (NOCs) の教師信号で学習し、ドメインをまたいで汎化するコンパクトな幾何学認識特徴を獲得する。(2) 幾何学的に一貫したマッチングアルゴリズムにより、信頼性の高い1対1のCAD-to-image対応を確立する点。これにより、反復的なポーズ最適化を必要とせず、サブ秒単位の正確なアライメントを実現する。

4. どうやって有効だと検証した?

ScanNet25kベンチマークで評価し、カテゴリ精度33.4%、インスタンス精度42.3%を達成。最強のゼロショットベースラインを10.3/12.2ポイント上回り、計算フットプリントも小さい。さらに、このベンチマークで初めて完全教師あり手法をも上回った。

5. 議論はある?

要旨からは、オクルージョンやドメインギャップに対する頑健性の詳細な分析や、他のデータセットでの汎化性能、失敗事例などは不明。また、弱教師あり学習のためのデータ収集のコストや、NOCsラベルの品質が性能に与える影響についての議論は要旨に含まれていない。

6. 次に読むべき論文は?

要旨で参照されている関連研究として、視覚的基盤モデルを用いたゼロショット手法(具体的な名称は不明)や、完全教師あり手法が挙げられる。また、CAD-to-image alignmentの分野では、PoseCNNやDeepIMなどの定番手法が関連する。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Saad Ejaz, Miguel Fernandez-Cortizas, Javier Civera, Holger Voos, Jose Luis Sanchez-Lopez

分類: cs.CV, cs.RO

原文アブストラクト

CAD-to-image alignment aims to estimate an object's 9D pose (rotation, translation, and anisotropic scale) from a single RGB image, enabling applications in robotics and augmented reality. Recent zero-shot methods use visual foundation models to match image regions to CAD models, yet typically their correspondences are appearance-driven and degrade under occlusion or sim-to-real domain shift. To address these limitations, we introduce SUFLECA (Scaling Up Feature LEarning for CAD Alignment), a weakly-supervised framework for zero-shot CAD alignment with two key contributions. First, SUFLECA scales up geometry-grounded feature learning from pretrained visual representations through Normalized Object Coordinates (NOCs) supervision on 674K images spanning 12 real and synthetic datasets, learning compact geometry-aware features that generalize across domains. Second, we propose a geometrically consistent matching algorithm that establishes reliable one-to-one CAD-to-image correspondences. Together, these contributions enable accurate, sub-second alignment per object instance without iterative pose refinement. On ScanNet25k, SUFLECA achieves 33.4%/42.3% category/instance accuracy, outperforming, with a smaller computational footprint, the strongest zero-shot baseline by 10.3/12.2 percentage points and, for the first time on this benchmark, even surpassing fully supervised methods. Code is available at: https://github.com/snt-arg/SUFLECA

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI