SceneVGGT:VGGTベースのオンライン3DセマンティックSLAMによる屋内シーン理解とナビゲーション
SceneVGGT: VGGT-based online 3D semantic SLAM for indoor scene understanding and navigation
VGGTを基盤にスライディングウィンドウで長尺動画を処理し、2Dインスタンスマスクを3Dオブジェクトに持ち上げて時系列一貫性を保つオンライン3DセマンティックSLAMを構築。推定床面に物体位置を投影し、音声フィードバック付き支援ナビゲーションを実現した。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Anna Gelencsér-Horváth, Gergely Dinya, Dorka Boglárka Erős, Péter Halász, Islam Muhammad Muqsit, Kristóf Karacs
分類: cs.RO, eess.IV
原文アブストラクト
We present SceneVGGT, a spatio-temporal 3D scene understanding framework that combines SLAM with semantic mapping for autonomous and assistive navigation. Built on VGGT, our method scales to long video streams via a sliding-window pipeline. We align local submaps using camera-pose transformations, enabling memory- and speed-efficient mapping while preserving geometric consistency. Semantics are lifted from 2D instance masks to 3D objects using the VGGT tracking head, maintaining temporally coherent identities for change detection. As a proof of concept, object locations are projected onto an estimated floor plane for assistive navigation. The pipeline's GPU memory usage remains under 17 GB, irrespectively of the length of the input sequence and achieves competitive point-cloud performance on the ScanNet++ benchmark. Overall, SceneVGGT ensures robust semantic identification and is fast enough to support interactive assistive navigation with audio feedback.
