日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転arXiv:2506.11526

自動運転における基盤モデル:シナリオ生成と分析に関するサーベイ

Foundation Models in Autonomous Driving: A Survey on Scenario Generation and Scenario Analysis

シェア:XThreadsFacebookLINEはてブBluesky

自動運転のシナリオ生成・分析に基盤モデル(LLM、VLM、拡散モデル、ワールドモデルなど)を適用した研究を体系的に整理し、データセット・評価指標・課題をまとめたサーベイ。

詳しい要約

1. どんなもの?

- 対象: autonomous driving における scenario generation と scenario analysis への foundation models の応用を調査した survey(2025年5月時点) - 範囲: 統一 taxonomy として large language models、vision-language models、multimodal large language models、diffusion models、world models を整理 - 付随内容: 手法、open-source datasets、simulation platforms、benchmark challenges、評価指標をレビュー - 結論部: open challenges と research questions、今後の研究方向を提示 - 補足: レビュー論文リストを継続更新する repository(https://github.com/TUM-AVS/FM-for-Scenario-Generation-Analysis)を公開

2. 先行研究と比べてどこがすごい?

- 従来の scenario generation は rule-based systems、knowledge-driven models、data-driven synthesis に依存し、多様性が限られ非現実的な safety-critical cases を生みがちだった - foundation models は heterogeneous inputs(natural language、sensor data、HD maps、control actions 等)を扱え、複雑な driving scenarios の合成と解釈を可能にする点が新しい - 本 survey はこれらの foundation models を scenario generation と scenario analysis に横断的に整理した unified taxonomy を提示する点が差分 - 手法だけでなく datasets、simulation platforms、benchmark challenges、評価指標まで一体的に扱う点が特徴 - 具体的な先行 survey との比較優位は要…

3. 技術・手法の肝は?

- 統一 taxonomy の構築: large language models、vision-language models、multimodal large language models、diffusion models、world models を分類軸とする - 各カテゴリについて scenario generation と scenario analysis への応用手法をレビュー - open-source datasets と simulation platforms を整理し、benchmark challenges を概観 - scenario generation と scenario analysis に特化した evaluation metrics を検討 - 継続更新 repository でレビュー対象論文と補足資料を管理 - 個々の技術的アルゴリズムの詳細は要旨からは不明

4. どうやって有効だと検証した?

- 本稿は survey であり、新規手法の実験的検証は要旨からは不明 - 有効性の根拠として、レビュー対象の手法・datasets・simulation platforms・benchmark challenges・評価指標を体系的に整理した点を提示 - 継続更新 repository に全レビュー論文と補足資料を掲載し再現・参照可能性を確保 - 定量的な比較実験や ablation による検証は要旨からは不明

5. 議論はある?

- open challenges と research questions を提示し、promising future research directions を展望 - 従来手法の限界(多様性不足、非現実的な safety-critical cases)を foundation models が補う可能性を議論 - heterogeneous inputs の活用による複雑シナリオの合成・解釈の可能性を論点とする - 具体的な課題の中身や個別の議論内容は要旨からは不明

6. 次に読むべき論文は?

- 本 survey が整理する large language models、vision-language models、multimodal large language models、diffusion models、world models の各カテゴリの代表論文 - 本 survey がレビューする open-source datasets と simulation platforms に関する論文 - benchmark challenges および scenario generation・analysis 向け evaluation metrics に関する文献 - 継続更新 repository(https://github.com/TUM-AVS/FM-for-Scenario-Generation-Analysis)に掲載の論文リスト - 個別の著者名・論文名は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yuan Gao, Mattia Piccinini, Yuchen Zhang, Dingrui Wang, Korbinian Moller, Roberto Brusnicki, Baha Zarrouki, Alessio Gambi, Jan Frederik Totz, Kai Storms, Steven Peters, Andrea Stocco, Bassam Alrifaee, Marco Pavone, Johannes Betz

分類: cs.RO, cs.AI

原文アブストラクト

For autonomous vehicles, safe navigation in complex environments depends on handling a broad range of diverse and rare driving scenarios. Simulation- and scenario-based testing have emerged as key approaches to development and validation of autonomous driving systems. Traditional scenario generation relies on rule-based systems, knowledge-driven models, and data-driven synthesis, often producing limited diversity and unrealistic safety-critical cases. With the emergence of foundation models, which represent a new generation of pre-trained, general-purpose AI models, developers can process heterogeneous inputs (e.g., natural language, sensor data, HD maps, and control actions), enabling the synthesis and interpretation of complex driving scenarios. In this paper, we conduct a survey about the application of foundation models for scenario generation and scenario analysis in autonomous driving (as of May 2025). Our survey presents a unified taxonomy that includes large language models, vision-language models, multimodal large language models, diffusion models, and world models for the generation and analysis of autonomous driving scenarios. In addition, we review the methodologies, open-source datasets, simulation platforms, and benchmark challenges, and we examine the evaluation metrics tailored explicitly to scenario generation and analysis. Finally, the survey concludes by highlighting the open challenges and research questions, and outlining promising future research directions. All reviewed papers are listed in a continuously maintained repository, which contains supplementary materials and is available at https://github.com/TUM-AVS/FM-for-Scenario-Generation-Analysis.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI