日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転arXiv:2603.15771

CorrectionPlanner: 強化学習を用いた自動運転における自己修正プランナー

CorrectionPlanner: Self-Correction Planner with Reinforcement Learning in Autonomous Driving

シェア:XThreadsFacebookLINEはてブBluesky

自動運転のためのプランナーに自己修正機能を導入し、不安全な動作を提案した際に修正ループで安全な動作を生成する手法を提案。模倣学習とモデルベース強化学習で訓練し、衝突率を20%以上削減した。

詳しい要約

1. どんなもの?

- 自動運転のための安全な計画手法。 - 自己修正機能を持つautoregressive planner。 - 計画をmotion-token生成としてモデル化し、propose, evaluate, correctのループで動作。 - 各ステップでpolicyがmotion tokenを提案し、collision criticが衝突予測。 - 衝突予測時は履歴をself-correction traceとして保持し、次のmotion tokenを生成。 - 安全なmotion tokenが得られるか安全基準を満たすまで繰り返す。

2. 先行研究と比べてどこがすごい?

- 従来の学習ベースplannerは明示的な自己修正能力を欠く。 - 不安全行動を提案しても修正メカニズムがない。 - 提案手法は自己修正ループを導入し、衝突率を20%以上削減。 - Waymaxで衝突率低減、nuPlanでstate-of-the-art planning scoresを達成。

3. 技術・手法の肝は?

- 計画をmotion-token生成としてautoregressiveにモデル化。 - propose, evaluate, correctのループ。 - policyがmotion tokenを提案、collision criticが短期horizon内の衝突を予測。 - 衝突予測時は過去の不安全motion token列をself-correction traceとして保持。 - そのtraceを条件に次のmotion tokenを生成。 - 安全なmotion tokenが得られるまで繰り返す。 - 学習はimitation learning後、pretrained world modelからのrolloutを用いたmodel-based reinforcement learning。

4. どうやって有効だと検証した?

- Closed-loop evaluationsを実施。 - Waymaxで衝突率を20%以上削減。 - nuPlanでstate-of-the-art planning scoresを達成。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- Waymax, nuPlan, imitation learning, model-based reinforcement learning, world model, collision critic, autoregressive planner, motion-token generation

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yihong Guo, Dongqiangzi Ye, Sijia Chen, Anqi Liu, Xianming Liu

分類: cs.RO, cs.AI

原文アブストラクト

Autonomous driving requires safe planning, but most learning-based planners lack explicit self-correction ability: once an unsafe action is proposed, there is no mechanism to correct it. Thus, we propose CorrectionPlanner, an autoregressive planner with self-correction that models planning as motion-token generation within a propose, evaluate, and correct loop. At each planning step, the policy proposes an action, namely a motion token, and a learned collision critic predicts whether it will induce a collision within a short horizon. If the critic predicts a collision, we retain the sequence of historical unsafe motion tokens as a self-correction trace, generate the next motion token conditioned on it, and repeat this process until a safe motion token is proposed or the safety criterion is met. This self-correction trace, consisting of all unsafe motion tokens, represents the planner's correction process in motion-token space, analogous to a reasoning trace in language models. We train the planner with imitation learning followed by model-based reinforcement learning using rollouts from a pretrained world model that realistically models agents' reactive behaviors. Closed-loop evaluations show that CorrectionPlanner reduces collision rate by over 20% on Waymax and achieves state-of-the-art planning scores on nuPlan.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI