日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

3D再構成arXiv:2603.06061

全方位RGB-LiDARデータを3Dガウシアンスプラッティングへ変換するパイプライン

Transforming Omnidirectional RGB-LiDAR data into 3D Gaussian Splatting

シェア:XThreadsFacebookLINEはてブBluesky

ロボティクスや自動運転で収集された既存の全方位RGB-LiDARログを再利用し、3DGSの初期化に適したデータへ変換するパイプラインを提案。歪み補正や点群ダウンサンプリング、位置合わせを統合し、破棄されがちなデータを高品質な3Dシーン再構成に活用する。

詳しい要約

1. どんなもの?

本論文は、ロボティクスや自動運転で日常的に収集される全方位RGB画像とLiDARログを再利用し、3D Gaussian Splatting (3DGS) の初期化資産へ変換するパイプラインを提案する。従来は伝送制約などで捨てられていたデータを活用し、大規模デジタルツイン構築を低コスト化することを目指す。

2. 先行研究と比べてどこがすごい?

従来の3DGS構築は高価な専用データ収集を要した。本研究は既存のアーカイブログを再利用し、捨てられていたデータの相当部分をSfM幾何に転換する。またLiDAR強化初期化により、視覚のみのベースラインより構造複雑なシーンで最終レンダリング忠実度を一貫して向上させる。

3. 技術・手法の肝は?

ERP-to-cubemap変換モジュールで決定的な空間アンカリングを行い、非線形歪みによるSfM追跡不安定化を回避する。PRISMという色階層化ダウンサンプリング戦略で密で非組織なLiDAR点群の計算負荷を低減する。Fast Point Feature Histograms (FPFH) ベースのグローバル登録とIterative Closest Point (ICP) でマルチモーダル入力を橋渡しする。

4. どうやって有効だと検証した?

提案パイプラインが捨てられたデータの相当部分を利用可能なSfM幾何へ再目的化すること、およびLiDAR強化初期化が視覚のみのベースラインと比較して構造複雑シーンでの3DGSレンダリング忠実度を一貫して向上させることを示した。

5. 議論はある?

要旨からは不明。

6. 次に読むべき論文は?

要旨で参照・比較されている研究は明示されていない。同分野の定番として3D Gaussian Splatting (3DGS)、Structure-from-Motion (SfM)、Iterative Closest Point (ICP)、Fast Point Feature Histograms (FPFH) に関する文献が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Semin Bae, Hansol Lim, Jongseong Brad Choi

分類: cs.CV, cs.RO

原文アブストラクト

The demand for large-scale digital twins is rapidly growing in robotics and autonomous driving. However, constructing these environments with 3D Gaussian Splatting (3DGS) usually requires expensive, purpose-built data collection. Meanwhile, deployed platforms routinely collect extensive omnidirectional RGB and LiDAR logs, but a significant portion of these sensor data is directly discarded or strictly underutilized due to transmission constraints and the lack of scalable reuse pipeline. In this paper, we present an omnidirectional RGB-LiDAR reuse pipeline that transforms these archived logs into robust initialization assets for 3DGS. Direct conversion of such raw logs introduces practical bottlenecks: inherent non-linear distortion leads to unreliable Structure-from-Motion (SfM) tracking, and dense, unorganized LiDAR clouds cause computational overhead during 3DGS optimization. To overcome these challenges, our pipeline strategically integrates an ERP-to-cubemap conversion module for deterministic spatial anchoring, alongside PRISM-a color stratified downsampling strategy. By bridging these multi-modal inputs via Fast Point Feature Histograms (FPFH) based global registration and Iterative Closest Point (ICP), our pipeline successfully repurposes a considerable fraction of discarded data into usable SfM geometry. Furthermore, our LiDAR-reinforced initialization consistently enhances the final 3DGS rendering fidelity in structurally complex scenes compared to vision-only baselines. Ultimately, this work provides a deterministic workflow for creating simulation-grade digital twins from standard archived sensor logs.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI