日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

3D再構成arXiv:2510.01665

共形スケールを復元可能な微分幾何に基づく非剛体Structure-from-Motion

Non-Rigid Structure-from-Motion via Differential Geometry with Recoverable Conformal Scale

シェア:XThreadsFacebookLINEはてブBluesky

共形変形下での非剛体Structure-from-Motionにおいて、局所共形スケールを正確に復元し、深度とスケールの制約を分離することで高精度な3D再構成を実現する手法を提案した。

詳しい要約

1. どんなもの?

- 単眼視の変形SLAMにおけるmapping課題に対処するNon-rigid structure-from-motion (NRSfM)の新手法Con-NRSfMを提案 - conformal deformation(等長変形を部分集合として含む)下でのNRSfMを扱う - 2D selected image warpsをgraph-based frameworkで最適化しpoint-wise reconstructionを行う - 自己教師あり学習のencoder-decoder networkでtexture付きdense 3D point cloudsを生成

2. 先行研究と比べてどこがすごい?

- 既存手法はlocally planar surfacesやlocally linear deformationsといった厳しい仮定に依存し、conformal scaleを復元できなかった - 提案手法はこれらの制約を排除し、local conformal scaleを正確に計算 - depthとconformal scaleの制約を分離(decouple)でき、他手法では不可分だったものを扱える - これによりより精密なdepth estimationが可能 - synthetic/real datasetsでreconstruction accuracyとrobustnessが既存手法を上回る

3. 技術・手法の肝は?

- 2D selected image warpsをgraph-based frameworkで最適化するpoint-wise reconstruction - conformal deformationを扱いlocal conformal scaleを計算 - depthとconformal scaleの制約をdecoupleする枠組み - 定式化された問題のsensitivityに対処するためparallel separable iterative optimization strategyを採用 - encoder-decoder networkによるself-supervised learning frameworkでdense 3D point cloudsを生成

4. どうやって有効だと検証した?

- syntheticおよびreal datasetsの両方を用いたsimulationと実験を実施 - 既存手法と比較しreconstruction accuracyとrobustnessで上回ることを示した - 具体的なデータセット名や評価指標は要旨からは不明

5. 議論はある?

- 定式化された問題のsensitivityがあり、parallel separable iterative optimization strategyで対処している点が議論の対象 - locally planar/linear仮定を外したことによる影響の詳細は要旨からは不明 - 計算コストや収束性に関する議論は要旨からは不明

6. 次に読むべき論文は?

- isometric deformationsを扱うNRSfMの既存研究 - locally planar surfacesやlocally linear deformationsを仮定する既存NRSfM手法 - monocular visual deformable SLAM関連研究 - graph-based frameworkやself-supervised encoder-decoderを用いた3D reconstruction研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yongbo Chen, Yanhao Zhang, Shaifali Parashar, Liang Zhao, Shoudong Huang

分類: cs.CV, cs.RO

原文アブストラクト

Non-rigid structure-from-motion (NRSfM), a promising technique for addressing the mapping challenges in monocular visual deformable simultaneous localization and mapping (SLAM), has attracted growing attention. We introduce a novel method, called Con-NRSfM, for NRSfM under conformal deformations, encompassing isometric deformations as a subset. Our approach performs point-wise reconstruction using 2D selected image warps optimized through a graph-based framework. Unlike existing methods that rely on strict assumptions, such as locally planar surfaces or locally linear deformations, and fail to recover the conformal scale, our method eliminates these constraints and accurately computes the local conformal scale. Additionally, our framework decouples constraints on depth and conformal scale, which are inseparable in other approaches, enabling more precise depth estimation. To address the sensitivity of the formulated problem, we employ a parallel separable iterative optimization strategy. Furthermore, a self-supervised learning framework, utilizing an encoder-decoder network, is incorporated to generate dense 3D point clouds with texture. Simulation and experimental results using both synthetic and real datasets demonstrate that our method surpasses existing approaches in terms of reconstruction accuracy and robustness. The code for the proposed method will be made publicly available on the project website: https://sites.google.com/view/con-nrsfm.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI