日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

3D物体検出arXiv:2311.17770

PillarNeSt: ピラーベース3D物体検出のためのバックボーンスケーリングと事前学習

PillarNeSt: Embracing Backbone Scaling and Pretraining for Pillar-based 3D Object Detection

シェア:XThreadsFacebookLINEはてブBluesky

大規模画像データセットで事前学習した2D ConvNetをピラーベース3D検出器のバックボーンに導入し、nuScenesとArgoverse2で大幅な性能向上を達成した。

著者: Weixin Mao, Tiancai Wang, Diankun Zhang, Junjie Yan, Osamu Yoshie

分類: cs.CV, cs.RO

原文アブストラクト

This paper shows the effectiveness of 2D backbone scaling and pretraining for pillar-based 3D object detectors. Pillar-based methods mainly employ randomly initialized 2D convolution neural network (ConvNet) for feature extraction and fail to enjoy the benefits from the backbone scaling and pretraining in the image domain. To show the scaling-up capacity in point clouds, we introduce the dense ConvNet pretrained on large-scale image datasets (e.g., ImageNet) as the 2D backbone of pillar-based detectors. The ConvNets are adaptively designed based on the model size according to the specific features of point clouds, such as sparsity and irregularity. Equipped with the pretrained ConvNets, our proposed pillar-based detector, termed PillarNeSt, outperforms the existing 3D object detectors by a large margin on the nuScenes and Argoversev2 datasets. Our code shall be released upon acceptance.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  4. 4GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI