日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転シミュレーションarXiv:2505.00972

衝突を狙え:検索拡張大規模言語モデルによる自動運転のためのオンライン安全臨界シナリオ生成

Seeking to Collide: Online Safety-Critical Scenario Generation for Autonomous Driving with Retrieval Augmented Large Language Models

シェア:XThreadsFacebookLINEはてブBluesky

LLMを用いて背景車両の危険意図を推論し、検索拡張で敵対的軌道をオンライン生成する安全臨界シナリオ生成フレームワークを提案。Waymoデータセットで衝突率75%を達成。

詳しい要約

1. どんなもの?

- 自動運転車(AV)のシミュレーションテスト向けに、安全上重要な(safety-critical)走行シナリオをオンラインで生成するフレームワーク - retrieval-augmented large language model (LLM) を中核に据える - 観測状態から背景車両(background vehicle)の最も危険な意図(intent)を推論し、敵対的軌道(adversarial trajectories)を合成する - 意図-プランナ(intent-planner)ペアを動的に記憶・検索するバンクを持つ

2. 先行研究と比べてどこがすごい?

- 既存手法はよくある走行パターンに過適合(overfit)するか、オフラインで非対話的(offline, non-interactive)なため稀なcorner caseを出せない問題があった - 本手法はオンラインかつ対話的にsafety-criticalシナリオを生成できる点が新しい - 動的な記憶・検索バンクによりcatastrophic forgettingを緩和し適応を加速 - Waymo Open Motion Datasetでの評価でbaselineを大幅に上回る

3. 技術・手法の肝は?

- LLM-based behavior analyzerが観測状態から背景車両の最も危険なintentを推論 - 追加のLLM agentsに問い合わせて実行可能なadversarial trajectoriesを合成 - dynamic memorization and retrieval bankにintent-plannerペアを蓄積 - 新規intentが生じた際にbehavioral libraryを自動拡張する仕組み

4. どうやって有効だと検証した?

- Waymo Open Motion Datasetを用いて評価 - mean minimum time-to-collisionを1.62 sから1.08 sへ短縮 - 75%のcollision rateを達成し、baselinesを大幅に上回った - 具体的な比較対象baselineの名称は要旨からは不明

5. 議論はある?

- 要旨からは不明(限界や失敗ケース、計算コスト、LLM依存性などの議論は記述されていない) - 評価はWaymo Open Motion Datasetに限定されており、他データセットや実車への一般化は要旨からは不明

6. 次に読むべき論文は?

- Waymo Open Motion Datasetを用いた関連するscenario generation研究 - 既存のoffline/non-interactiveなscenario generation手法(具体名は要旨からは不明) - retrieval-augmented LLMおよびLLM-based behavior planningの関連研究 - safety-critical corner case生成やadversarial trajectory生成の定番手法

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yuewen Mei, Tong Nie, Jian Sun, Ye Tian

分類: cs.AI, cs.RO

原文アブストラクト

Simulation-based testing is crucial for validating autonomous vehicles (AVs), yet existing scenario generation methods either overfit to common driving patterns or operate in an offline, non-interactive manner that fails to expose rare, safety-critical corner cases. In this paper, we introduce an online, retrieval-augmented large language model (LLM) framework for generating safety-critical driving scenarios. Our method first employs an LLM-based behavior analyzer to infer the most dangerous intent of the background vehicle from the observed state, then queries additional LLM agents to synthesize feasible adversarial trajectories. To mitigate catastrophic forgetting and accelerate adaptation, we augment the framework with a dynamic memorization and retrieval bank of intent-planner pairs, automatically expanding its behavioral library when novel intents arise. Evaluations using the Waymo Open Motion Dataset demonstrate that our model reduces the mean minimum time-to-collision from 1.62 to 1.08 s and incurs a 75% collision rate, substantially outperforming baselines.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI