日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

3D再構成arXiv:2602.23224

UniScale:ロボット知覚のための事前情報注入による統一スケール対応多視点3D再構成

UniScale: Unified Scale-Aware 3D Reconstruction for Multi-View Understanding via Prior Injection for Robotic Perception

シェア:XThreadsFacebookLINEはてブBluesky

多視点画像からカメラ内部・外部パラメータ、スケール不変な深度と点群、実スケールを単一のフィードフォワードネットワークで推定し、既存モデルの事前情報を活用してロボット向け3D再構成を高精度化するフレームワーク。

詳しい要約

1. どんなもの?

- ロボティクス向けの統合的なscale-aware multi-view 3D reconstructionフレームワーク「UniScale」を提案。 - 単一のfeed-forward networkで、camera intrinsicsとextrinsics、scale-invariant depthとpoint maps、シーンのmetric scaleを同時推定。 - 利用可能な場合はauxiliary geometric priorsをオプションで組み込める。 - リソース制約のあるロボティクスチームに適するよう、ゼロからの学習を不要とし、既存モデルのworld priorsを活用。

2. 先行研究と比べてどこがすごい?

- 従来の手法と比べ、単一の統合モデルでcamera intrinsics/extrinsics、depth、point maps、metric scaleを同時に推定できる点が新しい。 - 既存モデルのworld priorsを活用し、geometric encoding strategiesなしで訓練不要とする点が、リソース制約下で有利。 - カメラ内部パラメータが既知の場合にそれを組み込んで性能を向上でき、カメラポーズも利用可能な場合はさらなる利得が得られる。 - 複数ベンチマークで強い汎化性能と一貫した性能を示す。

3. 技術・手法の肝は?

- 単一のfeed-forward networkにより、multi-view imagesからcamera intrinsics/extrinsics、scale-invariant depth、point maps、metric scaleをjointly推定。 - global contextual reasoningとcamera-aware feature representationsを組み合わせ、metric-scaleを回復。 - オプションでauxiliary geometric priorsを注入可能。 - 既存モデルのworld priorsを利用し、ゼロからの学習を不要とする。

4. どうやって有効だと検証した?

- 複数のベンチマークで評価を実施。 - 多様な環境で強い汎化性能と一貫した性能を実証。 - 具体的なベンチマーク名や評価指標は要旨からは不明。

5. 議論はある?

- リソース制約のあるロボティクスチームに適する点を強調。 - カメラ内部パラメータやポーズが利用可能な場合の性能向上に言及。 - 限界や課題、今後の議論については要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として、multi-view 3D reconstruction、scale-aware depth estimation、camera intrinsics/extrinsics estimation、geometric prior injection、world priorsを活用したモデル(例:DUSt3R、MASt3Rなど)が挙げられるが、要旨に記載はない。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Mohammad Mahdavian, Gordon Tan, Binbin Xu, Yuan Ren, Dongfeng Bai, Bingbing Liu

分類: cs.CV, cs.RO

原文アブストラクト

We present UniScale, a unified, scale-aware multi-view 3D reconstruction framework for robotic applications that flexibly integrates geometric priors through a modular, semantically informed design. In vision-based robotic navigation, the accurate extraction of environmental structure from raw image sequences is critical for downstream tasks. UniScale addresses this challenge with a single feed-forward network that jointly estimates camera intrinsics and extrinsics, scale-invariant depth and point maps, and the metric scale of a scene from multi-view images, while optionally incorporating auxiliary geometric priors when available. By combining global contextual reasoning with camera-aware feature representations, UniScale is able to recover the metric-scale of the scene. In robotic settings where camera intrinsics are known, they can be easily incorporated to improve performance, with additional gains obtained when camera poses are also available. This co-design enables robust, metric-aware 3D reconstruction within a single unified model. Importantly, UniScale does not require training from scratch, and leverages world priors exhibited in pre-existing models without geometric encoding strategies, making it particularly suitable for resource-constrained robotic teams. We evaluate UniScale on multiple benchmarks, demonstrating strong generalization and consistent performance across diverse environments. We will release our implementation upon acceptance.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI