移動ロボットのためのマルチビュー逐次3D点群セグメンテーション
Multi-view Incremental Segmentation of 3D Point Clouds for Mobile Robots
移動ロボットが複数視点から得た点群を逐次的に統合し、深層学習ネットワークMCPNetでクラス・インスタンスラベルをオンライン推定する手法を提案した論文。
著者: Jingdao Chen, Yong K. Cho, Zsolt Kira
分類: cs.RO
原文アブストラクト
Mobile robots need to create high-definition 3D maps of the environment for applications such as remote surveillance and infrastructure mapping. Accurate semantic processing of the acquired 3D point cloud is critical for allowing the robot to obtain a high-level understanding of the surrounding objects and perform context-aware decision making. Existing techniques for point cloud semantic segmentation are mostly applied on a single-frame or offline basis, with no way to integrate the segmentation results over time. This paper proposes an online method for mobile robots to incrementally build a semantically-rich 3D point cloud of the environment. The proposed deep neural network, MCPNet, is trained to predict class labels and object instance labels for each point in the scanned point cloud in an incremental fashion. A multi-view context pooling (MCP) operator is used to combine point features obtained from multiple viewpoints to improve the classification accuracy. The proposed architecture was trained and evaluated on ray-traced scans derived from the Stanford 3D Indoor Spaces dataset. Results show that the proposed approach led to 15% improvement in point-wise accuracy and 7% improvement in NMI compared to the next best online method, with only a 6% drop in accuracy compared to the PointNet-based offline approach.
関連論文
- PointGS: 3Dガウススプラッティングを用いた意味的に一貫した教師なし3D点群セグメンテーション3D点群セグメンテーション
- LogoSP: 3D点群の教師なしセマンティックセグメンテーションのためのスーパーポイントの局所-大域グルーピング3D点群セグメンテーション
- 実環境とシミュレーションのループによる3D点群の統合セグメンテーション:パネルから樹木・枝へ3D点群セグメンテーション
- BelHouse3D: 3D点群セマンティックセグメンテーションにおける遮蔽ロバスト性評価のためのベンチマークデータセット3D点群セグメンテーション
- GrowSP: 3D点群の教師なしセマンティックセグメンテーション3D点群セグメンテーション
- ランダムサンプリングによる大規模3D点群の効率的なセマンティックセグメンテーション3D点群セグメンテーション
