日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転/VLAarXiv:2604.18486

Xiaomi OneVL: ワンステップ潜在推論と視覚言語説明によるプランニング

Xiaomi OneVL: One-Step Latent Reasoning and Planning with Vision-Language Explanation

シェア:XThreadsFacebookLINEはてブBluesky

自動運転のVLAモデルにおいて、潜在推論を視覚世界モデルで強化し、明示的CoTを超える精度を実現しつつ、推論速度を回答のみの予測と同等に高速化したフレームワークを提案した。

詳しい要約

1. どんなもの?

- VLAベース自動運転のtrajectory prediction向けフレームワーク - OneVL (One-step latent reasoning and planning with Vision-Language explanations) - VLAとWorld Modelを統合し、latent reasoningを1ステップで実行 - 推論時はauxiliary decoderを捨て、latent tokenを並列prefill - answer-only予測と同等のlatencyで動作

2. 先行研究と比べてどこがすごい?

- 従来のCoTはautoregressiveでlatencyが大きく実時間展開に不向き - 既存latent CoTは連続hidden stateに圧縮するがexplicit CoTに劣る - 著者らは原因を言語的latentが世界のsymbolic abstractionを圧縮し、運転を支配するcausal dynamicsを捉えない点と指摘 - OneVLは4ベンチマークでlatent CoTとして初めてexplicit CoTを上回る - answer-only latencyでより高いaccuracyを実現

3. 技術・手法の肝は?

- 推論をcompact latent token経由で行う統合VLA+World Model - 二つのauxiliary decoderでlatentを監督 - language decoder: text CoTを再構成 - visual world model decoder: future-frame tokenを予測 - これによりlatent空間にroad geometry, agent motion, environmental changeのcausal dynamicsを内在化 - 3段階training pipelineでtrajectory, language, visual目的に段階的に整合 - 推論時はauxiliary decoderを破棄し、latent tokenを単一parallel passでprefill

4. どうやって有効だと検証した?

- 4つのbenchmarkで評価 - latent CoT手法として初めてexplicit CoTを上回るaccuracyを達成 - answer-only latencyで優位性を確認 - 詳細なベンチマーク名や指標は要旨からは不明

5. 議論はある?

- latent CoTがexplicit CoTに劣る原因をsymbolic abstraction圧縮と考察 - world model supervisionによりlatent CoTがverboseなtoken-by-token reasoningより汎化可能な表現を生むと主張 - 具体的な限界や失敗ケース、計算コスト詳細は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究: Chain-of-Thought (CoT), Latent CoT, VLA-based autonomous driving, World Model - 関連手法としてtrajectory prediction, Vision-Language-Action (VLA)モデル - 具体的な論文名は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jinghui Lu, Jiayi Guan, Zhijian Huang, Jinlong Li, Guang Li, Lingdong Kong, Yingyan Li, Han Wang, Shaoqing Xu, Yuechen Luo, Fang Li, Chenxu Dang, Junli Wang, Tao Xu, Jing Wu, Jianhua Wu, Xiaoshuai Hao, Wen Zhang, Tianyi Jiang, Lingfeng Zhang, Lei Zhou, Yingbo Tang, Jie Wang, Yinfeng Gao, Xizhou Bu, Haochen Tian, Yihang Qiu, Feiyang Jia, Lin Liu, Yigu Ge, Hanbing Li, Yuannan Shen, Jianwei Cui, Hongwei Xie, Bing Wang, Haiyang Sun, Jingwei Zhao, Jiahui Huang, Pei Liu, Zeyu Zhu, Yuncheng Jiang, Zibin Guo, Chuhong Gong, Hanchao Leng, Kun Ma, Naiyan Wang, Guang Chen, Kuiyuan Yang, Hangjun Ye, Long Chen

分類: cs.CV, cs.CL, cs.RO

原文アブストラクト

Chain-of-Thought (CoT) reasoning has become a powerful driver of trajectory prediction in VLA-based autonomous driving, yet its autoregressive nature imposes a latency cost that is prohibitive for real-time deployment. Latent CoT methods attempt to close this gap by compressing reasoning into continuous hidden states, but consistently fall short of their explicit counterparts. We suggest that this is due to purely linguistic latent representations compressing a symbolic abstraction of the world, rather than the causal dynamics that actually govern driving. Thus, we present OneVL (One-step latent reasoning and planning with Vision-Language explanations), a unified VLA and World Model framework that routes reasoning through compact latent tokens supervised by dual auxiliary decoders. Alongside a language decoder that reconstructs text CoT, we introduce a visual world model decoder that predicts future-frame tokens, forcing the latent space to internalize the causal dynamics of road geometry, agent motion, and environmental change. A three-stage training pipeline progressively aligns these latents with trajectory, language, and visual objectives, ensuring stable joint optimization. In inference, the auxiliary decoders are discarded, and all latent tokens are prefilled in a single parallel pass, matching the speed of answer-only prediction. Across four benchmarks, OneVL becomes the first latent CoT method to surpass explicit CoT, delivering superior accuracy at answer-only latency. These results show that with world model supervision, latent CoT produces more generalizable representations than verbose token-by-token reasoning. Code has been open-sourced to the community. Project Page: https://xiaomi-embodied-intelligence.github.io/OneVL

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI