日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

LiDAR生成arXiv:2611.11131

CrossLiDAR:制御可能なマルチセンサLiDAR系列生成

CrossLiDAR: Controllable Multi-Sensor LiDAR Sequence Generation

シェア:XThreadsFacebookLINEはてブBluesky

拡散トランスフォーマで複数LiDARセンサの時空間的に一貫したスキャン系列を生成し、BEVや3Dボックスで構造を制御できるフレームワーク。

詳しい要約

1. どんなもの?

- 高忠実度な LiDAR simulation のための生成フレームワーク - 名称は CrossLiDAR - transformer ベースの統一フレームワーク - 生成対象は multi-sensor LiDAR sequences - 制御可能 (controllable) - 時空間的に一貫 (spatio-temporally consistent) - 想定用途は autonomous systems の開発・検証 - 長い horizon の rollout を可能にし、scenario-based testing を狙う - 出力は range images の潜在空間上で生成される LiDAR 系列

2. 先行研究と比べてどこがすごい?

- 既存 generator の課題を明示 - 単一 sensor 構成に限定されがち - 構造・geometry への制御が限定的 - 長 horizon の 4D 生成で drift する - CrossLiDAR の差分 - 複数 LiDAR sensor を扱う統一フレームワーク - Inter-sensor Module により sensor 間の相互作用を実現 - ControlNet 風 branch で構造条件 (BEV priors, 3D bounding boxes) を入力可能 - 短い N-frame 系列を autoregressive に拡張し長 horizon の一貫性を改善 - 定量比較 - nuScenes と Waymo Dataset で SOTA baseline を上回る - JSD 平均 29.56% 改善、MMD 平均 15.36% 改善

3. 技術・手法の肝は?

- 基盤は transformer ベースの生成モデル - backbone は Multi-Modal Diffusion Transformer (MM-DiT) - 目的関数は rectified flow - 表現空間 - range images の compact latent space 上で生成 - 複数 sensor 対応 - Inter-sensor Module が sensor 間の interaction を担う - calibration-consistent な multi-sensor rollout を狙う - 構造制御 - ControlNet-style branch を追加 - BEV priors や 3D bounding boxes を条件として与える - 時間方向の扱い - 短い N-frame 系列を生成 - autoregressive に延長して long-horizon coherence を改善

4. どうやって有効だと検証した?

- データセット - nuScenes - Waymo Dataset - 評価指標 - JSD - MMD - 結果 - state-of-the-art baselines に対し平均で JSD 29.56% 改善、MMD 15.36% 改善 - 主張 - calibration-consistent な multi-sensor LiDAR rollouts を長 horizon で実現 - controllable, scenario-based testing への橋渡し - 詳細な実験設定・被験者評価・real data との比較手順は要旨からは不明

5. 議論はある?

- 要旨で述べられる貢献 - 単一 sensor 制約の緩和 - 構造・geometry 制御の提供 - 長 horizon 4D 生成での drift 抑制 - 想定される意義 - autonomous-driving simulation における multi-sensor rollout の実現 - scenario-based testing への応用 - 限界・議論点は要旨からは不明 - 実 sensor との domain gap - 計算コスト - 条件制御の失敗ケース - 評価指標の妥当性 - いずれも要旨からは不明

6. 次に読むべき論文は?

- 要旨で直接参照・比較されている研究 - 個別名は明示されず、state-of-the-art baselines との比較のみ - 関連手法として挙げられる要素 - rectified flow - Multi-Modal Diffusion Transformer (MM-DiT) - ControlNet - BEV priors - 3D bounding boxes - 同分野の定番として次に読む候補 - LiDAR simulation / LiDAR generation の既存研究 - diffusion model 系の LiDAR 生成 - nuScenes や Waymo Dataset を用いた生成評価論文 - 具体的な論文名は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Khanh Nguyen, Thomas Walker, Hichem Telli, Carlos de la Torre-Ortiz, Stefano Fiorini, Salah Eddine Bekhouche, Mohammed-En-Nadhir Zighem, Wassim Swaileh, Tinghuai Wang

分類: cs.CV, cs.AI, cs.RO

原文アブストラクト

High-fidelity LiDAR simulation remains a bottleneck for scalable development and validation of autonomous systems. Existing generators can synthesize realistic scans, but they are typically constrained to a single sensor configuration, offer limited control over structure and geometry, and drift in long-horizon 4D generation. We present CrossLiDAR, a unified transformer-based framework capable of generating controllable and spatio-temporally consistent multi-sensor LiDAR sequences. Our approach leverages a rectified flow objective with a Multi-Modal Diffusion Transformer (MM-DiT) backbone, within a compact latent space of range images. To support multiple LiDAR sensors, an Inter-sensor Module enables interaction across sensors, while a ControlNet-style branch provides structural conditioning (e.g., BEV priors or 3D bounding boxes). For modeling the temporal consistency, CrossLiDAR generates short $N$-frame sequences and extends them autoregressively to improve long-horizon coherence. Our model significantly outperforms state-of-the-art baselines, achieving an average improvement of 29.56\% in JSD and 15.36\% in MMD evaluated on nuScenes and the Waymo Dataset. CrossLiDAR bridges the gap to modern autonomous-driving simulation by enabling calibration-consistent multi-sensor LiDAR rollouts over long horizons for controllable, scenario-based testing.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI