日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

3Dシーン生成arXiv:2601.15250

FlowSSC:単眼セマンティックシーン補完のためのワンステップ潜在拡散による汎用生成フレームワーク

FlowSSC: Universal Generative Monocular Semantic Scene Completion via One-Step Latent Diffusion

シェア:XThreadsFacebookLINEはてブBluesky

単眼RGB画像からのセマンティックシーン補完を条件付き生成問題として扱い、トリプレーン潜在空間でのショートカットフローマッチングにより1ステップで高品質な3Dシーン生成を実現した。

詳しい要約

1. どんなもの?

- 単眼RGB画像からのSemantic Scene Completion (SSC) を生成モデルとして解くFlowSSCを提案。 - 初のmonocular SSCへの生成的フレームワーク。 - 条件付き生成問題として扱い、既存のfeed-forward SSC手法と統合可能。 - リアルタイム推論のためShortcut Flow-matchingを導入。 - コンパクトなtriplane latent spaceで動作。 - 1ステップで高忠実度生成を実現。

2. 先行研究と比べてどこがすごい?

- 従来のfeed-forward手法は遮蔽領域の詳細生成や物体間の空間関係保持が困難。 - FlowSSCは生成モデルにより遮蔽領域の妥当な詳細生成と空間関係保持を実現。 - 既存のfeed-forward SSC手法に統合可能で性能を大幅に向上。 - 標準的なdiffusionモデルが数百ステップ必要なのに対し、1ステップで高忠実度生成を実現。 - SemanticKITTIでstate-of-the-art性能を達成し、既存ベースラインを大幅に上回る。

3. 技術・手法の肝は?

- SSCを条件付き生成問題として定式化。 - コンパクトなtriplane latent spaceで動作するShortcut Flow-matchingを導入。 - ショートカット機構により1ステップで高忠実度生成を実現。 - 既存のfeed-forward SSC手法とシームレスに統合可能。 - リアルタイム推論を可能にする設計。

4. どうやって有効だと検証した?

- SemanticKITTIデータセットで広範な実験を実施。 - state-of-the-art性能を達成し、既存ベースラインを大幅に上回ることを確認。 - 生成品質とリアルタイム性の両立を検証。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として、feed-forward SSC手法、diffusionモデル、Shortcut Flow-matching、triplane latent spaceを用いた生成モデルが挙げられる。 - 同分野の定番として、SemanticKITTIベースのSSC手法(例: MonoScene, VoxFormerなど)が次に読むべき論文として考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zichen Xi, Hao-Xiang Chen, Nan Xue, Hongyu Yan, Qi-Yuan Feng, Levent Burak Kara, Joaquim Jorge, Qun-Ce Xu

分類: cs.CV, cs.RO

原文アブストラクト

Semantic Scene Completion (SSC) from monocular RGB images is a fundamental yet challenging task due to the inherent ambiguity of inferring occluded 3D geometry from a single view. While feed-forward methods have made progress, they often struggle to generate plausible details in occluded regions and preserve the fundamental spatial relationships of objects. Such accurate generative reasoning capability for the entire 3D space is critical in real-world applications. In this paper, we present FlowSSC, the first generative framework applied directly to monocular semantic scene completion. FlowSSC treats the SSC task as a conditional generation problem and can seamlessly integrate with existing feed-forward SSC methods to significantly boost their performance. To achieve real-time inference without compromising quality, we introduce Shortcut Flow-matching that operates in a compact triplane latent space. Unlike standard diffusion models that require hundreds of steps, our method utilizes a shortcut mechanism to achieve high-fidelity generation in a single step, enabling practical deployment in autonomous systems. Extensive experiments on SemanticKITTI demonstrate that FlowSSC achieves state-of-the-art performance, significantly outperforming existing baselines.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI