日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転/VLA/強化学習arXiv:2605.14201

MAPLE: 潜在マルチエージェントプレイによるエンドツーエンド自動運転

MAPLE: Latent Multi-Agent Play for End-to-End Autonomous Driving

シェア:XThreadsFacebookLINEはてブBluesky

VLAモデルを閉ループで訓練するため、潜在空間でマルチエージェントのロールアウトを行い、強化学習で安全・進捗・多様性を最適化するフレームワークを提案。外部シミュレータ不要でスケーラブルな閉ループ訓練を実現し、Bench2DriveでSOTAを達成。

詳しい要約

1. どんなもの?

- 提案手法: MAPLE - VLAモデルをend-to-end motion plannerとして用いる枠組み - 動的運転シナリオをlatent spaceで反応的なmulti-agent rollout - ego車両と周辺traffic agentsを独立に多段horizon制御 - closed-loop trainingを可能にする - 目的: 閉ループ評価での脆さを改善 - 従来のimitation learning下での訓練が原因 - 反応的環境を完全にモデル化できない課題に対処

2. 先行研究と比べてどこがすごい?

- 先行のclosed-loop supervision - scalabilityに欠ける - 反応的環境を完全にモデル化できない - MAPLEの利点 - 外部simulator不要でscalable - simulatorは計算コスト大、視覚的忠実度に限界 - latent spaceでのmulti-agent playを実現 - ログデータにない計画行動を促すdiversity rewardsを導入

3. 技術・手法の肝は?

- 2段階の訓練 - 第1段階: ground-truth trajectoriesに基づくlatent rolloutsのsupervised fine-tuning - 第2段階: globalおよびagent-specific rewardsによるreinforcement learning - rewardsの設計 - 安全性、進捗、interaction realismを促す - diversity rewardsでログにない行動を生成 - 制御の特徴 - ego車両と周辺traffic agentsを独立に多段horizon制御 - 他agentに反応的

4. どうやって有効だと検証した?

- ベンチマーク: Bench2Drive - 結果: state-of-the-art driving performanceを達成 - 示された性質 - scalableなclosed-loop multi-agent play - robustなE2E autonomous driving systemsへの有効性

5. 議論はある?

- 利点: 外部simulator不要でscalable - simulatorの計算コストと視覚的忠実度の限界を回避 - 課題: 要旨からは不明 - latent spaceでの忠実性や一般化の限界は明記なし - 訓練安定性や計算コストの詳細も不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究 - VLA models - end-to-end motion planners - imitation learning - closed-loop supervision - Bench2Drive - 関連手法 - reinforcement learning - supervised fine-tuning - multi-agent rollout

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Rajeev Yasarla, Deepti Hegde, Hsin-Pai Cheng, Shizhong Han, Yunxiao Shi, Meysam Sadeghigooghari, Hanno Ackermann, Litian Liu, Pranav Desai, Fatih Porikli, Mohammad Ghavamzadeh, Hong Cai

分類: cs.RO, cs.CV

原文アブストラクト

Vision-language-action (VLA) models are effective as end-to-end motion planners, but can be brittle when evaluated in closed-loop settings due to being trained under traditional imitation learning framework. Existing closed-loop supervision approaches lack scalability and fail to completely model a reactive environment. We propose MAPLE, a novel framework for reactive, multi-agent rollout of a dynamic driving scenario in the latent space of the VLA model. The ego vehicle and nearby traffic agents are independently controlled over multi-step horizons, while being reactive to other agents in the scene, enabling closed-loop training. MAPLE consists of two training stages: (1) supervised fine-tuning on the latent rollouts based on ground-truth trajectories, followed by (2) reinforcement learning with global and agent -specific rewards that encourage safety, progress, and interaction realism. We further propose diversity rewards that encourage the model to generate planning behaviors that may not be present in logged driving data. Notably, our closed-loop training framework is scalable and does not require external simulators, which can be computationally expensive to run and have limited visual fidelity to the real-world. MAPLE achieves state-of-the-art driving performance on Bench2Drive and demonstrates scalable, closed-loop multi-agent play for robust E2E autonomous driving systems.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI