自動運転車の安全性を効率的にブラックボックス評価する手法
Efficient Black-box Assessment of Autonomous Vehicle Safety
商用自動運転システムをブラックボックスとして扱い、適応的重要度サンプリングで稀な事故シナリオを効率的に探索・評価するシミュレーション枠組みを構築し、OpenPilotの初の独立評価を行った。
著者: Justin Norden, Matthew O'Kelly, Aman Sinha
分類: cs.LG, cs.RO, stat.ML
原文アブストラクト
While autonomous vehicle (AV) technology has shown substantial progress, we still lack tools for rigorous and scalable testing. Real-world testing, the $\textit{de-facto}$ evaluation method, is dangerous to the public. Moreover, due to the rare nature of failures, billions of miles of driving are needed to statistically validate performance claims. Thus, the industry has largely turned to simulation to evaluate AV systems. However, having a simulation stack alone is not a solution. A simulation testing framework needs to prioritize which scenarios to run, learn how the chosen scenarios provide coverage of failure modes, and rank failure scenarios in order of importance. We implement a simulation testing framework that evaluates an entire modern AV system as a black box. This framework estimates the probability of accidents under a base distribution governing standard traffic behavior. In order to accelerate rare-event probability evaluation, we efficiently learn to identify and rank failure scenarios via adaptive importance-sampling methods. Using this framework, we conduct the first independent evaluation of a full-stack commercial AV system, Comma AI's OpenPilot.
関連論文
- 時空間遮蔽領域における最悪ケース隠れ車両軌道探索自動運転/安全性評価
- 位置推定の不確かさ下での自動運転のための信念空間残余リスク自動運転/安全性評価
- 評価を進化へ:自動運転のための敵対的拡散を閉ループカリキュラムに変換する自動運転/安全性評価
- 死角を克服:自動運転の安全性向上のための遮蔽考慮自動運転/安全性評価
- 反事実的安全マージンによる自動運転車のリスク評価自動運転/安全性評価
- 自動運転車のシナリオベース安全評価フレームワーク自動運転/安全性評価
