日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

協調運転/拡散モデル/強化学習arXiv:2604.11734

SCORP: 協調運転のためのシーン整合型マルチエージェント拡散計画と安定なオンライン強化学習後訓練

SCORP: Scene-Consistent Multi-agent Diffusion Planning with Stable Online Reinforcement Post-Training for Cooperative Driving

シェア:XThreadsFacebookLINEはてブBluesky

協調運転向けに、シーン整合性を高めたマルチエージェント拡散プランナーを提案し、安定なオンライン強化学習後訓練を実現した。

詳しい要約

1. どんなもの?

- 協調運転のためのマルチエージェント拡散プランナー - 名称は SCORP - シーン整合性とオンライン強化学習(RL)事後学習を両立 - 目的 - 安全・効率が重要な協調運転 - 多様で相互作用を考慮した軌道の調整 - 構成 - 事前学習: シーン条件付きマルチエージェント denoising - 事後学習: 安定したオンライン RL - 対象 - 反応的なマルチエージェント環境 - 閉ループ協調運転

2. 先行研究と比べてどこがすごい?

- 既存の拡散ベース手法 - デモからマルチモーダル挙動を獲得可能 - しかしシーン整合性が弱い - 閉ループ協調目的との整合も不十分 - 事後学習の必要性 - 反応的マルチエージェント環境での安定オンライン事後学習は困難 - SCORP の利点 - シーン整合性と道路遵守を改善 - 安定かつ持続的な閉ループ協調運転の進歩 - 代替事後学習法と比べ安全・効率で一貫した利得

3. 技術・手法の肝は?

- 事前学習 - シーン条件付きマルチエージェント denoising アーキテクチャ - エージェント間 self-attention を結合 - 二経路条件付け機構 - cross-attention: シーン情報を直接注入 - AdaLN-Zero: 柔軟で安定な条件変調 - 事後学習 - 二層 Markov decision process (MDP) - 逆 denoising 連鎖と policy-environment 相互作用を統合 - 密で整形された planning rewards を共同設計 - variance-gated group-relative policy optimization (VG-GRPO) - advantage collapse と勾配不安定性を緩和

4. どうやって有効だと検証した?

- 実験 - WOMD 上で強力なオープンソースベースラインと比較 - 結果 - 核心安全指標で 10.47%–28.26% 改善 - 効率指標で 1.70%–7.22% 改善 - 事後学習法比較 - 代替事後学習法と比べ - 運転安全と交通効率の両方で有意かつ一貫した利得 - 安定・持続的な閉ループ協調運転の進歩を示す

5. 議論はある?

- 課題 - 反応的マルチエージェント環境での安定オンライン事後学習 - 閉ループ協調目的との整合 - 提案による対処 - 二層 MDP と VG-GRPO で advantage collapse と勾配不安定性を緩和 - 密で整形された planning rewards - 限界や未解決点 - 要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究 - 既存の diffusion-based methods - オープンソースベースライン - 代替 post-training methods - 関連手法 - group-relative policy optimization (GRPO) - AdaLN-Zero - cross-attention - Markov decision process (MDP) - データセット - WOMD

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Haojie Bai, Aimin Li, Ruoyu Yao, Xiongwei Zhao, Tingting Zhang, Xing Zhang, Lin Gao, and Jun Ma

分類: cs.RO, cs.AI

原文アブストラクト

Cooperative driving is a safety- and efficiency-critical task that requires the coordination of diverse, interaction-realistic multi-agent trajectories. Although existing diffusion-based methods can capture multimodal behaviors from demonstrations, they often exhibit weak scene consistency and poor alignment with closed-loop cooperative objectives. This makes post-training necessary for further improvement, yet achieving stable online post-training in reactive multi-agent environments remains challenging. In this paper, we propose SCORP, a scene-consistent multi-agent diffusion planner with stable online reinforcement learning (RL) post-training for cooperative driving. For pre-training, we develop a scene-conditioned multi-agent denoising architecture that couples inter-agent self-attention with a dual-path conditioning mechanism: cross-attention provides direct scene-information injection, while AdaLN-Zero enables additional flexible and stable conditional modulation, thereby improving the scene consistency and road adherence of joint trajectories. For post-training, we formulate a two-layer Markov decision process (MDP) that explicitly integrates the reverse denoising chain with policy-environment interaction. We further co-design dense, well-shaped planning rewards and variance-gated group-relative policy optimization (VG-GRPO) to mitigate advantage collapse and gradient instability during closed-loop training. Extensive experiments show that SCORP outperforms strong open-source baselines on WOMD, with 10.47%-28.26% and 1.70%-7.22% improvements in core safety and efficiency metrics, respectively. Moreover, compared with alternative post-training methods, SCORP delivers significant and consistent gains in both driving safety and traffic efficiency, highlighting stable and sustained advances in closed-loop cooperative driving.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI