日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

データセットarXiv:2605.18074

4DLidarOpen: 動作認識のためのオープンな4D FMCWライダーデータセット

4DLidarOpen: An Open 4D FMCW Lidar Dataset for Motion-Aware Autonomous Driving

シェア:XThreadsFacebookLINEはてブBluesky

自動運転向けに、4D FMCWライダーによる速度情報を含む大規模なマルチモーダルデータセットを構築し、3D物体検出やBEVセグメンテーション、フロー予測などのベンチマークを提供した。

詳しい要約

1. どんなもの?

- 4D FMCW Lidarを中心とした大規模オープン・マルチモーダル自動運転データセット - 前方向け4D FMCW Lidarによる点ごとのradial velocity計測を含む - rotating, solid-state, blind-spotなど複数種類のLidar、surround-view cameras、6-DOF ego-vehicle posesを収録 - 北京の複雑な都市環境で収集し、歩行者との密な相互作用、渋滞、高速走行、unprotected maneuversをカバー - 同期マルチセンサデータと5カテゴリの3D bounding-box注釈(persistent track IDs付き)を提供 - 3D object detection、BEV segmentation and flow prediction、motion forecasting with planningのベンチマークを構築

2. 先行研究と比べてどこがすごい?

- 従来のtime-of-flight Lidarデータセットは主に幾何計測を提供するのに対し、本データセットは4D FMCW Lidarによる点ごとのradial velocity計測を含む - 複数種類のLidar(rotating, solid-state, blind-spot)とsurround-view cameras、6-DOF ego-vehicle posesを組み合わせたマルチモーダル性 - 5カテゴリの3D bounding-box注釈にpersistent track IDsを付与し、追跡可能な時系列注釈を提供 - hybrid annotation strategyにより、大規模auto-labeledデータと人手精査済みデータを両立 - 速度情報が動的シーン理解に補完的なmotion cuesを提供することを実験的に示した点

3. 技術・手法の肝は?

- 前方向け4D FMCW Lidarから点ごとのradial velocityを取得 - rotating, solid-state, blind-spot Lidar、surround-view cameras、6-DOF ego-vehicle posesを同期収集 - 5カテゴリの3D bounding-box注釈にpersistent track IDsを付与 - hybrid annotation strategy:大規模auto-labeledデータでスケーラブルな学習を支援し、human expertsがhuman-annotated training/validationセットの注釈を精査 - 3D object detection、BEV segmentation and flow prediction、motion forecasting with planningのベンチマークを構築 - データセットと評価ツールキットを公開

4. どうやって有効だと検証した?

- 3D object detection、BEV segmentation and flow prediction、motion forecasting with planningのベンチマークを構築 - 広範な実験により、4D FMCW Lidarの直接速度計測が動的シーン理解に補完的なmotion cuesを提供することを示す - 幾何のみのセンシングと比較し、velocity-aware representationがmotion関連知覚と下流のforecasting/planningを改善 - 特にvulnerable road usersやfast-moving objectsを含むシナリオで有効性を確認 - 具体的な評価指標やベースラインの詳細は要旨からは不明

5. 議論はある?

- 4D FMCW Lidarがmotion-aware autonomous drivingに向けた有望なセンシングモダリティであると結論 - 速度情報が動的シーン理解に補完的なmotion cuesを提供 - velocity-aware representationがmotion関連知覚と下流のforecasting/planningを改善 - 特にvulnerable road usersやfast-moving objectsを含むシナリオで有効 - データセットと評価ツールキットを公開し、4D scene understanding、multi-Lidar fusion、velocity-aware perception and planningの研究を支援 - 限界や課題の詳細は要旨からは不明

6. 次に読むべき論文は?

- 4D FMCW Lidarを用いたmotion-aware perception/planningの関連研究 - multi-Lidar fusionに関する研究 - velocity-aware perception and planningの研究 - BEV segmentation and flow predictionの研究 - motion forecasting with planningの研究 - 要旨で参照/比較されている個別の先行研究名は明示されていないため、同分野の定番としてtime-of-flight Lidarデータセット(例:nuScenes、Waymo Open Dataset、KITTI)や4D FMCW Lidar関連研究を挙げる

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kane Qian, Xin Zhao, Yining Shi, Rujun Yan, Zhengqing Pan, Kaojin Zhu, Mengmeng Yang, Kai Sun, Diange Yang, Kun Jiang

分類: cs.RO

原文アブストラクト

We present 4DLidarOpen, a large-scale open multi-modal dataset for autonomous driving, centered on 4D frequency-modulated continuous-wave (FMCW) Lidar sensing. Unlike conventional time-of-flight Lidar datasets that mainly provide geometric measurements, 4DLidarOpen includes point-wise radial velocity measurements from a forward-facing 4D FMCW Lidar, together with multiple Lidars of different types, including rotating, solid-state, and blind-spot variants, surround-view cameras, and 6-DOF ego-vehicle poses. The dataset was collected in complex urban environments in Beijing and covers dense pedestrian interactions, congested traffic, high-speed driving, and unprotected maneuvers. 4DLidarOpen provides synchronized multi-sensor data and 3D bounding-box annotations with persistent track IDs across five object categories. A hybrid annotation strategy is adopted, where large-scale auto-labeled data support scalable training and human experts refine annotations for the human-annotated training and validation sets. Based on this dataset, we establish benchmarks for 3D object detection, birds-eye view (BEV) segmentation and flow prediction, and motion forecasting with planning. Extensive experiments show that direct velocity measurements from 4D FMCW Lidar provide complementary motion cues for dynamic-scene understanding. Compared with geometric-only sensing, the velocity-aware representation improves motion-related perception and downstream forecasting and planning, especially in scenarios involving vulnerable road users and fast-moving objects. These results indicate that 4D FMCW Lidar is a promising sensing modality for motion-aware autonomous driving. The dataset and evaluation toolkit are publicly released to support research on 4D scene understanding, multi-Lidar fusion, and velocity-aware perception and planning.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI