日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転計画arXiv:2508.16947

好みに合わせて運転:強化学習とマルチヘッド拡散モデルによるパーソナライズ運転

Drive As You Like: Multi-Head Diffusion with Reinforcement Learning for Personalized Driving

シェア:XThreadsFacebookLINEはてブBluesky

LLMによる意図理解と拡散モデルベースのマルチヘッドプランナーを強化学習で統合し、ユーザーの好みに合わせた多様な運転軌道を生成する枠組みを提案。nuPlanベンチマークで競争力のある性能とリアルタイム性を示した。

詳しい要約

1. どんなもの?

- 個人化された自動運転のための motion planning フレームワーク - RL-guided な multi-strategy 構成 - diffusion-based multi-head planner(M-Diffusion Planner) - LLM-based semantic understanding を統合 - ユーザ意図を動的に知覚し、選好に沿った多様な trajectory を生成することを狙う - 実運用での異種サービス・文脈依存の選好に対応する user-oriented 能力を目指す

2. 先行研究と比べてどこがすごい?

- 既存の imitation learning ベース planner は高頻度で偏った挙動の再現に留まり、人間の運転行動の多様性を捉えにくい - 既存系は人間の interaction や環境文脈から user intent を理解できず、柔軟な policy adaptation も欠く - 本研究は user intent の明示的モデリングと複数 strategy による選好整合を両立させる点が差異 - ただし具体的な先行研究名・数値比較は要旨からは不明

3. 技術・手法の肝は?

- diffusion-based multi-head planner により多様な trajectory を生成 - LLM-based semantic understanding で user intent を意味的に解釈 - 二段階学習: - 第一段階: imitation learning で各 policy head の安全・高品質な planning を担保 - 第二段階: constrained Group Relative Policy Optimization (GRPO) で各 head を user preference に整合 - trajectory 品質と strategy 整合のバランスを取る設計

4. どうやって有効だと検証した?

- nuPlan benchmark 上で評価 - open-loop と closed-loop の両設定で実験 - 競争力のある性能を示し、real-time planning 要件を満たすと報告 - user intent との整合性も有効であると主張 - 具体的な指標・ベースライン・数値は要旨からは不明

5. 議論はある?

- 多様な選好への適応と user intent 理解の必要性を動機として提示 - imitation learning 偏重への批判と、RL による選好整合の有効性を主張 - 制約付き GRPO による strategy alignment の設計上の議論は要旨では限定的 - 限界・失敗事例・計算コストの詳細は要旨からは不明

6. 次に読むべき論文は?

- imitation learning ベースの autonomous driving planner に関する代表的研究 - diffusion-based motion planning(例: Diffusion Policy 系) - Group Relative Policy Optimization (GRPO) および constrained RL による選好整合 - LLM を用いた user intent 理解・semantic understanding の関連研究 - nuPlan benchmark を用いた planning 評価研究 - 要旨で個別論文の参照・比較は明示されていないため、上記は同分野の関連手法・定番

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Fan Ding, Xuewen Luo, Fucai Ke, Hwa Hui Tew, Susilawati Susilawati, Vishnu Monn Baskaran, Junn Yong Loo

分類: cs.RO, cs.AI

原文アブストラクト

Despite significant progress, imitation learning-based autonomous driving planners remain largely restricted to reproducing high-frequency biased behaviors, overlooking the inherent behavioral diversity of human driving. Moreover, existing systems struggle to understand user intent from human interactions and environmental contexts. In real-world advanced deployment, motion planning must accommodate diverse, context-dependent user preferences to support heterogeneous driving services, requiring the ability to interpret human intent and adapt behavior accordingly. However, existing approaches lack such user-oriented capabilities, as they neither explicitly model user intent nor enable flexible policy adaptation. To bridge this gap, we propose an RL-guided multi-strategy framework with a diffusion-based multi-head planner(M-Diffusion Planner) integrated with LLM-based semantic understanding, enabling dynamic perception of user intent and generation of diverse, preference-aligned trajectories. To balance trajectory quality and strategy alignment, we adopt a two-stage training paradigm: first, imitation learning ensures each policy head achieves safe and high-quality planning; second, constrained Group Relative Policy Optimization (GRPO) further aligns each head with user preferences. Experiments on the nuPlan benchmark, under both open-loop and closed-loop settings, demonstrate competitive performance while meeting real-time planning requirements and effectively aligning with user intent.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI