日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2609.31814

DriveHierarchy: VLM自動運転能力を開放ループ理解から閉ループ実行まで診断するベンチマーク

DriveHierarchy: A Benchmark for Diagnosing VLM Driving Capabilities from Open-Loop Understanding to Closed-Loop Execution

シェア:XThreadsFacebookLINEはてブBluesky

VLMベース自動運転を「知覚的接地・文脈記憶・心的推論・閉ループ実行」の4階層で評価する統一ベンチマークを構築し、15モデルの能力構造と開放ループ理解と閉ループ運転の関係を分析した。

詳しい要約

1. どんなもの?

- VLM-based autonomous drivingの評価のための階層的ベンチマーク - 4つのランクで構成: perceptual grounding, contextual memory, mental reasoning, closed-loop execution - オープンループベンチマーク: 複数のオープンソース自動運転データセットを統合し、84,279フレームにわたる76,798のQAペアを提供 - クローズドループシミュレーションプラットフォーム: 実世界の道路ネットワーク上でインタラクティブなシナリオ構築が可能で、100の運転シナリオをキュレーション - 15のVLMを評価し、能力の構造的かつ非冗長な変動を捉え、オープンループ理解とクローズドループ運転を関連付ける

2. 先行研究と比べてどこがすごい?

- 既存のベンチマークはオープンループ理解かクローズドループ運転のどちらかを評価するが、能力の組織化や関係性を説明する構造が限られていた - DriveHierarchyは階層的ベンチマークとして4つのランクを組織し、能力の構造的変動を捉え、診断と改善の基盤を提供 - オープンループとクローズドループを統合し、両者の関係を明らかにする点が新しい

3. 技術・手法の肝は?

- 階層的ベンチマークの設計: 4つのランク(perceptual grounding, contextual memory, mental reasoning, closed-loop execution) - オープンループベンチマークの構築: 複数のオープンソース自動運転データセットを統合し、76,798 QAペアを84,279フレームから生成 - クローズドループシミュレーションプラットフォーム: 実世界の道路ネットワーク上でインタラクティブなシナリオ構築を可能にし、100の運転シナリオをキュレーション - 15のVLMを評価し、能力の構造的変動を分析

4. どうやって有効だと検証した?

- 15のVLMを用いた実験により、DriveHierarchyが構造的だが非冗長な能力変動を捉えることを示した - オープンループ理解とクローズドループ運転の関係を明らかにした - 診断とベンチマークガイド付き最適化の実用的基盤を提供することを示した

5. 議論はある?

- 要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていないが、関連手法としてVLM-based autonomous drivingの既存ベンチマーク(例: オープンループ理解用のベンチマーク、クローズドループ運転用のベンチマーク)が挙げられる

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Chengkai Xu, Jiaqi Liu, Yicheng Guo, Peng Hang, Jian Sun

分類: cs.AI

原文アブストラクト

Evaluating VLM-based autonomous driving remains difficult because driving competence is composite, where a capable system must ground traffic participants and hazards, integrate context across views and time, reason about future evolution, and act appropriately under closed-loop interaction. Existing benchmarks usually assess either open-loop understanding or closed-loop driving but provide limited structure for explaining how these abilities are organized, how they relate, and how they may inform model diagnosis and improvement. We present \textsc{DriveHierarchy}, a hierarchical benchmark that organizes VLM-based autonomous driving into four ranks, spanning perceptual grounding, contextual memory, mental reasoning, and closed-loop execution. To instantiate this hierarchy, we integrate multiple open-source autonomous-driving datasets into a unified open-loop benchmark with 76,798 question-answer pairs over 84,279 frames and develop a closed-loop simulation platform with interactive scenario construction on a real-world road network, from which 100 driving scenarios are curated for embodied evaluation. Experiments on 15 VLMs show that \textsc{DriveHierarchy} captures structured but non-redundant capability variation, relates open-loop understanding to closed-loop driving, and provides a practical basis for diagnosis and benchmark-guided optimization. \textsc{DriveHierarchy} therefore serves as a unified framework for evaluating and improving VLM-based autonomous driving systems. An anonymized project has been released on https://github.com/PerfectXu88/DriveHierarchy

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI