日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転arXiv:2608.29005

カメラのみのエンドツーエンド運転のための劣化耐性ベンチマーク

A Degradation-Tolerance Benchmark for Camera-Only End-to-End Driving

シェア:XThreadsFacebookLINEはてブBluesky

カメラのみのエンドツーエンド運転モデルに対する画像劣化耐性を評価するベンチマークDriveDegradeを提案し、16種類の劣化を5段階で注入して計画性能への影響を分析した。

詳しい要約

1. どんなもの?

DriveDegradeは、カメラのみを使用するEnd-to-End (E2E) 運転モデルに対する画像劣化耐性を評価するベンチマークである。16種類の劣化ファミリーを5段階の強度で画像ローダー内に動的に注入し、15のポリシーを評価する。nuScenesとNAVSIMでのオープンループ計画、およびCARLAでのクローズドループ評価を含む。

2. 先行研究と比べてどこがすごい?

既存のCorruption-robustnessベンチマークは検出やBird's-Eye-View知覚に焦点を当てており、実際に車を運転する計画出力を評価していない。DriveDegradeは計画出力に直接焦点を当て、劣化に対するポリシーの耐性を評価する点で新しい。

3. 技術・手法の肝は?

画像ローダー内で劣化をオンザフライで注入し、16の劣化ファミリー(ぼけ、ノイズ、低照度、天候、フレーム損失、メモリ障害など)を5段階の強度で適用する。オープンループ計画をnuScenesとNAVSIMで評価し、CARLAでのクローズドループ評価も行う。さらに、画像を劣化させるものと情報を削除するものを分離し、Ego-Statusショートカットを定量化する。

4. どうやって有効だと検証した?

15のポリシーを評価し、軽度の劣化は計画にほとんど影響しないこと、ぼけ、JPEG、雨滴が計画に最もダメージを与えること、天候とビットエラーは広範囲で許容されることを示した。また、公開されているVision-Language-Actionプランナーは両軸でフラットであり、6つのカメラすべてをブラインドしても11.5%のコストしかかからないことを示した。

5. 議論はある?

フラットな曲線は曖昧であり、画像を劣化させるものと情報を削除するものを分離することで、無関心とロバスト性を混同しないようにしている。Ego-Statusショートカットの存在が示唆され、プランナーがカメラ情報を実際に使用していない可能性がある。

6. 次に読むべき論文は?

要旨で参照されている関連研究として、Corruption-robustnessベンチマーク(例:ImageNet-C)や、E2E運転モデル(例:UniAD、VAD)が挙げられる。また、Vision-Language-Actionモデル(例:GPT-4Vベースの運転モデル)も関連する。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Haohua Que, Handong Yao

分類: cs.RO

原文アブストラクト

Camera-only end-to-end (E2E) driving models are nearing deployment, where the camera stream is degraded by blur, noise, low light, weather, frame loss, and memory faults. How much a policy tolerates before its driving breaks is unclear. Corruption-robustness benchmarks target detection or bird's-eye-view perception, not the planning output that drives the car. We present DriveDegrade, a benchmark for image-degradation tolerance in camera-only E2E driving. Sixteen corruption families at five severities are injected on the fly inside the image loader, one operator reaching fifteen policies, and we evaluate open-loop planning on nuScenes and NAVSIM plus a CARLA closed-loop anchor. First, mild degradation barely affects planning, and the families that break it have a clear threshold at mid severity. Second, fragility is corruption-dependent: blur, JPEG, and raindrop damage planning most, while weather and bit error are tolerated far into the range. Third, a flat curve is ambiguous, so we separate corruptions that degrade the image from those that remove it. A planner that reads its camera must lose accuracy when information is deleted, whatever it does under quality loss. On these two axes the planners separate sharply, quantifying the ego-status shortcut without mistaking indifference for robustness. A released vision-language-action planner is flat on both axes, and blinding all six of its cameras costs it only 11.5 percent.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI