日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転arXiv:2605.21139

思考の蒸留と行動の予見:自動運転のための認知物理強化学習

Distill to Think, Foresee to Act: Cognitive-Physical Reinforcement Learning for Autonomous Driving

シェア:XThreadsFacebookLINEはてブBluesky

自動運転のための認知物理強化学習フレームワークCoPhyを提案。VLM知識を蒸留して認知能力を保持しつつ、BEV世界モデルで将来予測を行い、安全と意図適合の二重報酬でポリシーを最適化する。

詳しい要約

1. どんなもの?

- 自動運転のための認知・物理強化学習フレームワークCoPhyを提案。 - 認知基盤としてVLM知識をBEVエンコーダに蒸留し、推論コストゼロで認知能力を保持。 - 物理環境として自己回帰的BEVワールドモデルを構築し、将来のセマンティックマップを予測。 - GRPOと二重報酬機構で運転ポリシーを最適化。 - NAVSIM v1/v2でSOTAを達成し、言語指示による意図制御も可能。

2. 先行研究と比べてどこがすごい?

- 従来のend-to-end自動運転モデルはimitation learningのbehavioral cloningの限界に制約されていた。 - 強化学習には認知基盤と予見的物理環境が欠けていた。 - CoPhyはVLM蒸留により推論コストゼロで認知能力を実現し、BEVワールドモデルで安全メトリクスを直接導出。 - 二重報酬で物理的安全制約と意図遵守を両立。 - 先行研究と比べてSOTA性能と柔軟な意図制御を実現。

3. 技術・手法の肝は?

- VLM知識をBEVエンコーダに蒸留し、VLMを破棄して認知能力を保持。 - 認知チャネルをプラガブルインターフェースとして開放し、人間の言語コマンドをオプションで受付。 - 自己回帰的BEVワールドモデルが候補行動に条件付けて将来のセマンティックマップを予測。 - 予測を解釈可能な物理サンドボックスとし、安全メトリクスを直接導出。 - GRPOと二重報酬(物理報酬:BEVロールアウトからハード安全制約、認知報酬:言語整合スコアラで意図遵守)でポリシー最適化。

4. どうやって有効だと検証した?

- NAVSIM v1およびv2ベンチマークで広範な実験を実施。 - CoPhyがstate-of-the-art結果を達成することを示した。 - 認知に基づくシーン遵守による安全性向上と、ユーザー定義言語指示による柔軟な意図制御を実証。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として、VLM知識蒸留、BEVワールドモデル、GRPO、NAVSIMベンチマークに関する論文が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yang Wu, Qiang Meng, Zhaojiang Liu, Youquan Liu, Jian Yang, Jin Xie

分類: cs.CV, cs.LG

原文アブストラクト

Current end-to-end autonomous driving models are fundamentally constrained by the behavioral cloning ceiling of imitation learning. While reinforcement learning offers a path to smarter autonomy, it demands two missing pieces of infrastructure: (1) a cognitive foundation that understands traffic semantics and driving intent, and (2) a foresighted physical environment that can anticipate the consequences of candidate actions. To this end, we propose CoPhy, a CognitivePhysical reinforcement learning framework for autonomous driving. To distill to think, we distill VLM knowledge into the BEV encoder and then discard the VLM entirely, retaining cognitive ability at zero inference cost while releasing the cognitive channel as a pluggable interface for optional human language commands. To foresee to act, we build an auto-regressive BEV world model that explicitly predicts future semantic maps conditioned on candidate actions, serving as an interpretable physical sandbox from which safety metrics are directly derived. Built upon this dual infrastructure, we optimize the driving policy via GRPO with a novel dual-reward mechanism: a physical reward derived from BEV rollouts enforces hard safety constraints, while a cognitive reward from a language-aligned scorer ensures intent compliance. Extensive experiments demonstrate that CoPhy not only achieves state-of-the-art results on NAVSIM v1 and v2 benchmarks, but also enables safer driving via cognitively informed scene compliance and flexible intent control through user-defined language instructions.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI