日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転/VLAarXiv:2505.05098

X-Driver: 視覚言語モデルによる説明可能な自動運転

X-Driver: Explainable Autonomous Driving with Vision-Language Models

シェア:XThreadsFacebookLINEはてブBluesky

マルチモーダル大規模言語モデルとChain-of-Thought推論を組み合わせ、CARLAシミュレータ上の閉ループ自動運転でSOTA性能と解釈性を両立したフレームワーク。

詳しい要約

1. どんなもの?

- 閉ループ自動運転のための統合型 multi-modal large language models(MLLMs) フレームワーク「X-Driver」の提案 - Chain-of-Thought(CoT) と autoregressive modeling を活用し、知覚と意思決定を強化 - CARLA シミュレーション環境の公開ベンチマーク(Bench2Drive を含む)で複数の自動運転タスクを検証 - 閉ループ性能で SOTA を上回り、意思決定の解釈性も向上したと報告 - 構造化された推論の重要性を示し、今後の閉ループ自動運転研究の strong baseline を確立する位置づけ

2. 先行研究と比べてどこがすごい?

- 既存の end-to-end autonomous driving は open-loop/closed-loop で従来パイプラインより高い性能とシステム簡素性を示す一方、closed-loop 評価での成功率が低い課題があった - X-Driver は MLLMs に CoT と autoregressive modeling を組み込み、この closed-loop 性能の低さに対処 - 実験結果では closed-loop 性能が現行 SOTA を上回ったと主張 - 性能だけでなく運転意思決定の interpretability も改善 - ただし具体的な比較対象手法名や数値は要旨からは不明

3. 技術・手法の肝は?

- multi-modal large language models(MLLMs) を中核とした統合フレームワーク - Chain-of-Thought(CoT) による構造化推論で知覚・意思決定を強化 - autoregressive modeling を採用 - 閉ループ自動運転向けに設計された unified な構成 - 各コンポーネントの詳細なアーキテクチャや学習手順は要旨からは不明

4. どうやって有効だと検証した?

- CARLA シミュレーション環境の公開ベンチマークを用いて複数の自動運転タスクで検証 - Bench2Drive を含むベンチマークを利用 - 結果として closed-loop 性能が SOTA を上回り、意思決定の解釈性も向上したと報告 - 具体的なタスク構成、指標、数値は要旨からは不明

5. 議論はある?

- 構造化推論(structured reasoning)が end-to-end driving において重要であると結論 - X-Driver を閉ループ自動運転研究の strong baseline と位置づけ - 実世界展開に向けた closed-loop 評価の重要性を示唆 - 限界や失敗事例、計算コスト、実車への一般化に関する議論は要旨からは不明

6. 次に読むべき論文は?

- Bench2Drive(本論文で検証に使用されたベンチマーク) - Chain-of-Thought(CoT) を用いた推論手法 - multi-modal large language models(MLLMs) を用いた自動運転研究 - end-to-end autonomous driving の closed-loop 評価に関する研究 - 具体的な比較対象 SOTA 手法名は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Wei Liu, Jiyuan Zhang, Binxiong Zheng, Yufeng Hu, Yingzhan Lin, Zengfeng Zeng

分類: cs.RO, cs.CL, cs.CV, cs.ET

原文アブストラクト

End-to-end autonomous driving has advanced significantly, offering benefits such as system simplicity and stronger driving performance in both open-loop and closed-loop settings than conventional pipelines. However, existing frameworks still suffer from low success rates in closed-loop evaluations, highlighting their limitations in real-world deployment. In this paper, we introduce X-Driver, a unified multi-modal large language models(MLLMs) framework designed for closed-loop autonomous driving, leveraging Chain-of-Thought(CoT) and autoregressive modeling to enhance perception and decision-making. We validate X-Driver across multiple autonomous driving tasks using public benchmarks in CARLA simulation environment, including Bench2Drive[6]. Our experimental results demonstrate superior closed-loop performance, surpassing the current state-of-the-art(SOTA) while improving the interpretability of driving decisions. These findings underscore the importance of structured reasoning in end-to-end driving and establish X-Driver as a strong baseline for future research in closed-loop autonomous driving.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI