日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転arXiv:2510.15446

VDRive: 強化学習VLAと拡散ポリシーを活用したエンドツーエンド自動運転

VDRive: Leveraging Reinforced VLA and Diffusion Policy for End-to-end Autonomous Driving

シェア:XThreadsFacebookLINEはてブBluesky

VLAモデルと拡散ポリシーを組み合わせ、強化学習で微調整することで、動的環境やコーナーケースに対応する解釈可能なエンドツーエンド自動運転を実現した。

詳しい要約

1. どんなもの?

- 自動運転のためのend-to-endパイプライン「VDRive」を提案 - 動的環境やcorner casesに対処するため、state-action mappingを明示的にモデル化 - Vision Language Action Model (VLA) とgenerative diffusion policyベースのaction headを組み合わせ - 文脈的・幾何学的に運転をガイドし、解釈可能で堅牢な意思決定を実現

2. 先行研究と比べてどこがすごい?

- 先行研究と比べて、VLAのstate understandingとdiffusion policyを統合 - 文脈的ガイダンス(token生成による未来観測予測)と幾何学的ガイダンス(強化学習ファインチューニングによる軌跡・行動予測)を両立 - 階層的な行動と軌跡を生成する点が新しい - Bench2Drive closed-loop benchmarkとnuScenes open-loop planningでstate-of-the-art性能を達成

3. 技術・手法の肝は?

- VLAがtoken生成事前学習で未来観測を予測(観測はConditional Vector Quantized Variational Autoencoder (CVQ-VAE)で離散コード化) - 強化学習ファインチューニングにより、現在の運転条件に基づく未来軌跡と行動を予測 - VLAが現在状態tokenと予測状態tokenをaction policy headに供給し、階層的行動と軌跡を生成 - ポリシー訓練では学習されたcriticが生成行動を評価し、勾配ベースのフィードバックを提供するactor-criticフレームワークを構成

4. どうやって有効だと検証した?

- Bench2Drive closed-loop benchmarkとnuScenes open-loop planningで実験 - 両ベンチマークでstate-of-the-art性能を達成したと報告

5. 議論はある?

- 要旨からは不明(具体的な議論や限界についての記述なし)

6. 次に読むべき論文は?

- Vision Language Action Model (VLA) 関連の研究 - Conditional Vector Quantized Variational Autoencoder (CVQ-VAE) 関連の研究 - diffusion policy 関連の研究 - actor-critic 強化学習 関連の研究 - Bench2Drive benchmark 関連の研究 - nuScenes データセットを用いたplanning研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ziang Guo, Zufeng Zhang

分類: cs.RO

原文アブストラクト

In autonomous driving, dynamic environment and corner cases pose significant challenges to the robustness of ego vehicle's state understanding and decision making. We introduce VDRive, a novel pipeline for end-to-end autonomous driving that explicitly models state-action mapping to address these challenges, enabling interpretable and robust decision making. By leveraging the advancement of the state understanding of the Vision Language Action Model (VLA) with generative diffusion policy-based action head, our VDRive guides the driving contextually and geometrically. Contextually, VLA predicts future observations through token generation pre-training, where the observations are represented as discrete codes by a Conditional Vector Quantized Variational Autoencoder (CVQ-VAE). Geometrically, we perform reinforcement learning fine-tuning of the VLA to predict future trajectories and actions based on current driving conditions. VLA supplies the current state tokens and predicted state tokens for the action policy head to generate hierarchical actions and trajectories. During policy training, a learned critic evaluates the actions generated by the policy and provides gradient-based feedback, forming an actor-critic framework that enables a reinforcement-based policy learning pipeline. Experiments show that our VDRive achieves state-of-the-art performance in the Bench2Drive closed-loop benchmark and nuScenes open-loop planning.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI