日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転arXiv:2507.04049

DIVER: 強化学習と拡散モデルで模倣学習の限界を突破するエンドツーエンド自動運転

DIVER: Reinforced Diffusion Breaks Imitation Bottlenecks in End-to-End Autonomous Driving

シェア:XThreadsFacebookLINEはてブBluesky

拡散モデルによる多様な軌道生成と強化学習による安全性・多様性の誘導を組み合わせ、単一専門家の模倣学習が抱えるモード崩壊を解消するエンドツーエンド自動運転フレームワークを提案した。

詳しい要約

1. どんなもの?

- どんなもの? - end-to-end autonomous driving のためのフレームワーク DIVER を提案 - reinforcement learning と diffusion-based generation を統合し、多様で実行可能な trajectory を生成 - 単一 expert demonstration への imitation learning が生む保守的・均質な挙動と mode collapse の緩和を狙う - closed-loop の NAVSIM, Bench2Drive と open-loop の nuScenes で評価

2. 先行研究と比べてどこがすごい?

- 先行研究と比べてどこがすごい? - 多くの end-to-end 手法は単一 expert の imitation learning に依存し、保守的で均質な挙動になりがち - DIVER は単一 ground-truth trajectory から複数の reference trajectory を生成し、単一 expert 依存の制約を緩和 - reinforcement learning の reward-based supervision で safety と diversity の制約を課す点が特徴 - L2-based open-loop metrics では捉えにくい trajectory diversity を評価する新指標 Diversity metric を提案 - 実験で trajectory diversity を改善し、imitation learning 由来の mode collapse に対処したと報告

3. 技術・手法の肝は?

- 技術や手法の肝はどこ? - reinforced diffusion-based generation が中核 - map elements と surrounding agents を条件に、単一 ground-truth trajectory から複数の reference trajectory を生成 - diffusion process を reinforcement learning で誘導し、reward-based supervision により safety と diversity の制約を付与 - 生成 trajectory の practicality と generalization capability の向上を図る - 多モード予測の diversity 評価用に Diversity metric を設計

4. どうやって有効だと検証した?

- どうやって有効だと検証した? - closed-loop の NAVSIM と Bench2Drive、open-loop の nuScenes で extensive experiments を実施 - DIVER が trajectory diversity を有意に改善することを示す - imitation learning に内在する mode collapse 問題への対処を実験的に確認 - 具体的な数値や比較手法の詳細は要旨からは不明

5. 議論はある?

- 議論はある? - L2-based open-loop metrics は trajectory diversity を捉えにくいという限界を指摘し、Diversity metric を提案 - imitation learning の単一 expert 依存が保守性・均質性・mode collapse を招くという問題設定 - reinforcement learning による reward-based supervision が safety と diversity の両立にどう寄与するかの詳細は要旨からは不明 - 各 benchmark での定量的な優劣や失敗事例、計算コストの議論は要旨からは不明

6. 次に読むべき論文は?

- 次に読むべき論文は? - imitation learning を用いる end-to-end autonomous driving の代表的研究(要旨では個別名の参照なし) - diffusion-based trajectory generation を用いる driving 手法 - reinforcement learning を統合した autonomous driving 手法 - closed-loop benchmark である NAVSIM および Bench2Drive の関連論文 - open-loop dataset である nuScenes を用いた trajectory prediction/planning 研究 - mode collapse や multi-mode prediction の diversity 評価に関する研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ziying Song, Lin Liu, Hongyu Pan, Bencheng Liao, Mingzhe Guo, Lei Yang, Yongchang Zhang, Shaoqing Xu, Caiyan Jia, Yadan Luo

分類: cs.CV, cs.RO

原文アブストラクト

Most end-to-end autonomous driving methods rely on imitation learning from single expert demonstrations, often leading to conservative and homogeneous behaviors that limit generalization in complex real-world scenarios. In this work, we propose DIVER, an end-to-end driving framework that integrates reinforcement learning with diffusion-based generation to produce diverse and feasible trajectories. At the core of DIVER lies a reinforced diffusion-based generation mechanism. First, the model conditions on map elements and surrounding agents to generate multiple reference trajectories from a single ground-truth trajectory, alleviating the limitations of imitation learning that arise from relying solely on single expert demonstrations. Second, reinforcement learning is employed to guide the diffusion process, where reward-based supervision enforces safety and diversity constraints on the generated trajectories, thereby enhancing their practicality and generalization capability. Furthermore, to address the limitations of L2-based open-loop metrics in capturing trajectory diversity, we propose a novel Diversity metric to evaluate the diversity of multi-mode predictions.Extensive experiments on the closed-loop NAVSIM and Bench2Drive benchmarks, as well as the open-loop nuScenes dataset, demonstrate that DIVER significantly improves trajectory diversity, effectively addressing the mode collapse problem inherent in imitation learning.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI