日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転/敵対的攻撃arXiv:2606.30807

軌道を外す:生成型エンドツーエンド運転プランナーのスコアリングヘッドを安全違反の敵対的摂動で乗っ取る

Off the Rails: Hijacking the Scoring Head in Generative End-to-End Driving Planners with Safety-Violating Adversarial Perturbations

シェア:XThreadsFacebookLINEはてブBluesky

生成型自動運転プランナーが共通して持つスコアリングヘッドの脆弱性を突く敵対的攻撃フレームワーク「Derail」を提案し、安全な軌道選択を危険な候補に反転させられることを示した。

詳しい要約

1. どんなもの?

- 生成モデルをE2E自動運転に適用した際の脆弱性を突く攻撃フレームワーク「Derail」を提案。 - スコアリングヘッドを標的に、安全な軌道候補から危険な候補へ選択を反転させる。 - 様々な生成プランナーで評価し、スコア低下39-80%、衝突率最大50%を達成。

2. 先行研究と比べてどこがすごい?

- 従来の汎用的な損失最大化攻撃や特徴量発散攻撃よりも高い攻撃成功率を示す。 - 生成ADプランナーに特有のスコアリングヘッド推論パターンが攻撃対象となることを明らかにした。 - 安全性違反目的が攻撃効果を支配することを示唆。

3. 技術・手法の肝は?

- 生成ADプランナーの推論パターン(候補軌道をスコアリングヘッドで評価し最高スコアを選択)を悪用。 - スコアリングヘッドの決定マージンが小さいことに着目し、敵対的摂動を加える。 - 具体的な攻撃アルゴリズムは要旨からは不明。

4. どうやって有効だと検証した?

- 様々な生成プランナーで評価し、スコア低下39-80%、衝突率最大50%を確認。 - 汎用損失最大化攻撃や特徴量発散攻撃と比較し、一貫して優位性を示す。

5. 議論はある?

- スコアリングヘッド推論パターン自体が再発する攻撃対象であり、防御的考慮が必要と議論。 - 安全性違反目的が攻撃効果を支配することを示唆。 - 具体的な防御策や限界については要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照されている研究:diffusion-based denoising、vocabulary-based retrieval、generic loss-maximization attacks、feature-divergence attacks。 - 関連手法:BEV features、anchors、proposal queries。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Halima Bouzidi, Mboutidem Ekemini Mkpong, Haoyu Liu, Mohammad Abdullah Al Faruque

分類: cs.RO, cs.CR, cs.CV

原文アブストラクト

Generative models have recently seen rapid adoption in End-to-End (E2E) autonomous driving (AD), with diffusion-based denoising and vocabulary-based retrieval becoming the dominant trajectory-decoding paradigms. Despite their architectural diversity, current generative AD planners share a common inference pattern: a fixed set of candidate trajectories (anchors, vocabulary entries, or proposal queries) is scored by one or more learned heads conditioned on the Bird's-Eye-View (BEV) features, and the highest-scored candidate is returned as the final trajectory. Under this design, the scoring head is the only barrier between perception and the motion command, and its decision margins between competing candidates are often small. We introduce \textsc{Derail}, an adversarial framework that exploits this scoring-head attack surface. Evaluated on various generative planners, \textsc{Derail} flips the trajectory selection from a safe to an unsafe candidate, with score drops of $39$--$80\%$ and collision rates of up to $50\%$, consistently outperforming generic loss-maximization and feature-divergence attacks. Our analysis suggests that safety-violating objectives govern attack effectiveness against generative AD planners, and that the scoring-head inference pattern itself is a recurring attack surface worth explicit defensive consideration.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI