日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転VLAarXiv:2512.10226

潜在連鎖推論によるエンドツーエンド運転の世界モデリング

Latent Chain-of-Thought World Modeling for End-to-End Driving

シェア:XThreadsFacebookLINEはてブBluesky

運転行動の推論を自然言語ではなく、行動と整合した潜在空間で行うLCDriveを提案し、推論速度・軌道品質・強化学習の効果を向上させた。

詳しい要約

1. どんなもの?

- 自動運転向けの Vision-Language-Action (VLA) モデル - 推論時の reasoning を latent 空間で行うモデル LCDrive (Latent-CoT-Drive) を提案 - chain-of-thought (CoT) を自然言語ではなく、検討中の driving action の結果を捉える latent language で表現 - CoT reasoning と意思決定を action-aligned latent space で統合 - 推論は 2 種類のトークンを交互に生成 - action-proposal tokens: モデルの出力 action と同じ語彙を使用 - world model tokens: 学習された latent world model に基づき、action の将来結果を表現 - 対象は end-to-end driving の推論時 reasoning と安全性向上

2. 先行研究と比べてどこがすごい?

- 先行研究の多くは自然言語で CoT reasoning を表現してから driving action を出力 - 本論文はテキストが reasoning の最も効率的な表現とは限らないと指摘 - LCDrive は reasoning を latent language で行う点が新しい - action と同一語彙の action-proposal tokens と、latent world model に基づく world model tokens を交互生成 - 大規模 end-to-end driving benchmark で、non-reasoning および text-reasoning の baseline と比較し - 推論が高速 - trajectory 品質が向上 - interactive reinforcement learning による改善幅が大きい - と報告

3. 技術・手法の肝は?

- CoT reasoning と decision making を action-aligned latent space で統合 - 推論は以下のトークンを交互に生成することで行う - action-proposal tokens: 出力 action と同じ語彙を使用 - world model tokens: 学習された latent world model に基づき action の将来結果を表現 - latent CoT の cold start - シーンの ground-truth future rollouts に基づいて action proposals と world model tokens を supervision - post-training - closed-loop reinforcement learning により reasoning 能力を強化

4. どうやって有効だと検証した?

- 大規模 end-to-end driving benchmark で評価 - 比較対象 - non-reasoning baseline - text-reasoning baseline - 結果 - 推論が高速 - trajectory 品質が向上 - interactive reinforcement learning による改善幅が大きい - と報告されている - 具体的な benchmark 名や指標の詳細は要旨からは不明

5. 議論はある?

- 自然言語による CoT より latent 表現が効率的である可能性を示唆 - 推論速度と trajectory 品質の両面で優位と報告 - closed-loop reinforcement learning が reasoning 能力強化に有効であると示唆 - 限界や失敗ケース、latent world model の解釈性、安全性の詳細な議論は要旨からは不明

6. 次に読むべき論文は?

- 比較対象である text-reasoning 型の VLA chain-of-thought 研究(要旨では個別名の参照なし) - non-reasoning 型の end-to-end driving VLA モデル - latent world model を用いた driving 研究 - closed-loop reinforcement learning による VLA post-training 研究 - 具体的な論文名は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Shuhan Tan, Kashyap Chitta, Yuxiao Chen, Ran Tian, Yurong You, Yan Wang, Wenjie Luo, Yulong Cao, Philipp Krahenbuhl, Marco Pavone, Boris Ivanovic

分類: cs.CV, cs.RO

原文アブストラクト

Recent Vision-Language-Action (VLA) models for autonomous driving explore inference-time reasoning as a way to improve driving performance and safety in challenging scenarios. Most prior work uses natural language to express chain-of-thought (CoT) reasoning before producing driving actions. However, text may not be the most efficient representation for reasoning. In this work, we present Latent-CoT-Drive (LCDrive): a model that expresses CoT in a latent language that captures possible outcomes of the driving actions being considered. Our approach unifies CoT reasoning and decision making by representing both in an action-aligned latent space. Instead of natural language, the model reasons by interleaving (1) action-proposal tokens, which use the same vocabulary as the model's output actions; and (2) world model tokens, which are grounded in a learned latent world model and express future outcomes of these actions. We cold start latent CoT by supervising the model's action proposals and world model tokens based on ground-truth future rollouts of the scene. We then post-train with closed-loop reinforcement learning to strengthen reasoning capabilities. On a large-scale end-to-end driving benchmark, LCDrive achieves faster inference, better trajectory quality, and larger improvements from interactive reinforcement learning compared to both non-reasoning and text-reasoning baselines.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI