日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ポーズ推定arXiv:2606.08284

G2G: グループ内幾何を活用したグループ間ポーズ推定

G2G: Exploiting Intra-Group Geometry for Inter-Group Pose Estimation

シェア:XThreadsFacebookLINEはてブBluesky

2つの画像グループ間の相対6自由度ポーズを推定する手法を提案。グループ内の既知の幾何情報を活用しつつ、基盤モデルは凍結したまま軽量なモジュールを追加して高精度を達成した。

詳しい要約

1. どんなもの?

2つの画像グループ間の相対6-DoF poseを推定する問題を扱う。これはcross-sequence relocalizationやmulti-camera rig odometryの基盤となる。各グループはvisual odometryやrig calibrationから既知のintra-group geometryを持ち、pretrained multi-view backboneはその幾何をvisual featuresに融合済みである。しかし既存モデルは全viewをunstructured setとして扱い、cross-group reasoningが欠けている。本研究はG2Gを導入し、foundation modelを完全にfrozenに保ちつつ、2グループを橋渡しする3つの軽量trainable modulesを追加する。

2. 先行研究と比べてどこがすごい?

既存モデルは全viewをunstructured setとして扱い、cross-group reasoningが欠けていた。G2Gはfoundation modelをfrozenのまま、約32Mパラメータ(全体の6%未満)のtrainable modulesのみで2グループを橋渡しする。4つのdataset(indoor/outdoor simulation、real-world cross-season capture、zero-shot sim-to-real transfer)で、両タスクにおいてstate-of-the-art精度を達成。全baselineは元のfull supervisionで再学習されている。

3. 技術・手法の肝は?

G2Gはfoundation modelを完全にfrozenにし、3つの軽量trainable modulesを追加する:perceiver resampler、merged self-attentionを備えたcross-group bridge、multi-frame pose head。trainable footprintは約32Mパラメータで全体の6%未満。相対poseのみでsupervisedされる。

4. どうやって有効だと検証した?

4つのdatasetで検証:indoorとoutdoorのsimulation、real-world cross-season capture、zero-shot sim-to-real transfer。両タスクでstate-of-the-art精度を達成。全baselineは元のfull supervisionで再学習された。

5. 議論はある?

要旨からは不明。

6. 次に読むべき論文は?

要旨で参照/比較されている研究は明示されていない。関連手法としてvisual odometry、rig calibration、multi-view backbone、cross-sequence relocalization、multi-camera rig odometryが挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yufei Wei, Shuhao Ye, Chenxiao Hu, Yiyuan Pan, Dongyu Feng, Rong Xiong, Yue Wang, Yanmei Jiao

分類: cs.CV, cs.RO

原文アブストラクト

Recovering the relative 6-DoF pose between two image groups underlies cross-sequence relocalization and multi-camera rig odometry. Each group carries known intra-group geometry from visual odometry or rig calibration, and pretrained multi-view backbones already fuse such geometry into visual features. Yet current models treat all views as an unstructured set, leaving cross-group reasoning as the missing piece. We introduce \ours{}, which keeps the foundation model entirely frozen and adds three lightweight trainable modules to bridge the two groups: a perceiver resampler, a cross-group bridge with merged self-attention, and a multi-frame pose head. The trainable footprint totals about 32M parameters, under 6\% of the full model, and is supervised only by relative poses. Across four datasets that span indoor and outdoor simulation, real-world cross-season capture, and zero-shot sim-to-real transfer, \ours{} attains state-of-the-art accuracy on both tasks, while every baseline is retrained with its full original supervision. Code is available at https://github.com/WeiYuFei0217/G2G.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI