日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転/シーン生成arXiv:2605.26113

AnyScene: 任意の場所とその先における高制御性運転シーン生成に向けて

AnyScene: Towards Highly Controllable Driving Scene Generation at Anywhere and Beyond

シェア:XThreadsFacebookLINEはてブBluesky

BEVレイアウトからセマンティック占有シーケンスを生成し、それを基にマルチビュー運転ビデオを合成する統一的な占有中心フレームワークを提案。クロスデータセットやユーザー定義のレイアウトに対して高精度な制御と長期的生成を実現する。

詳しい要約

1. どんなもの?

- 高忠実度で制御可能な合成データを生成する枠組み - 自動運転のend-to-end学習、特に希少な安全クリティカルシナリオのlong tail対策 - occupancyを中心に据えた統合フレームワーク - BEVレイアウトからsemantic occupancy系列を生成 - 生成occupancyからmulti-view driving videoを合成 - 任意のBEVレイアウトとカメラ構成に対応

2. 先行研究と比べてどこがすごい?

- 既存のoccupancy-guided手法はshallow conditioningとreference-frame依存のvideo synthesis - 任意BEVレイアウトからの細粒度制御が困難 - scalable simulationへの適用が制限 - AnySceneはcross-datasetおよびuser-defined BEV入力から精密制御 - long-horizon生成を自然にサポート - reference-freeで柔軟なカメラ構成に対応

3. 技術・手法の肝は?

- Spatial-Temporal Occupancy Diffusion Transformer - BEVとoccupancy特徴をautoregressiveにjointly tokenize - これによりBEVレイアウトからsemantic occupancy系列を生成 - Geometry-Grounded View Expansion module - occupancyをcanonical spatial representationとして扱う - temporally consistent multi-view driving videoをreference-freeかつautoregressiveに合成 - 推論時の柔軟なカメラ構成を実現

4. どうやって有効だと検証した?

- 広範な実験を実施 - occupancy生成とvideo生成の両方でstate-of-the-art性能を達成 - 未見およびカスタマイズされたレイアウトへの強いgeneralizationを確認 - sparse-view 3D reconstructionなどの下流タスクに測定可能な利益を提供

5. 議論はある?

- 要旨からは不明 - 限界や失敗ケース、計算コスト、倫理的影響についての議論は記載なし

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない - 同分野の定番としてoccupancy-guided driving scene generation、BEV layout-based generation、diffusion transformer、autoregressive video synthesis、sparse-view 3D reconstructionに関する論文が挙げられる

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Haiming Zhang, Junfei Zhou, Feng Jiang, Jingzhong Li, Zhenglong Guo, Penglin Dai, Jifeng Dai, Yan Xie, Benjin Zhu

分類: cs.RO, cs.CV

原文アブストラクト

Generating high-fidelity and controllable synthetic data is critical for advancing end-to-end autonomous driving, particularly for addressing the long tail of rare safety-critical scenarios. Existing occupancy-guided methods typically rely on shallow conditioning mechanisms and reference-frame-dependent video synthesis, which limits fine-grained controllability from arbitrary BEV layouts and restricts their applicability for scalable simulation. In this paper, we propose AnyScene, a unified occupancy-centric framework for driving scene generation. AnyScene generates semantic occupancy sequences from BEV layouts through a Spatial-Temporal Occupancy Diffusion Transformer that jointly tokenizes BEV and occupancy features in an autoregressive manner. This design enables precise controllability from cross-dataset and user-defined BEV inputs while naturally supporting long-horizon generation. Building upon the generated occupancy, a Geometry-Grounded View Expansion module treats occupancy as the canonical spatial representation and synthesizes temporally consistent multi-view driving videos in a reference-free and autoregressive fashion, supporting flexible camera configurations at inference time. Extensive experiments demonstrate that AnyScene achieves state-of-the-art performance in both occupancy and video generation. It exhibits strong generalization to unseen and customized layouts, and provides measurable benefits for downstream tasks such as sparse-view 3D reconstruction.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI