日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転arXiv:2603.11093

自動運転システムにおける推論の調査:未解決の課題と新興パラダイム

A Survey of Reasoning in Autonomous Driving Systems: Open Challenges and Emerging Paradigms

シェア:XThreadsFacebookLINEはてブBluesky

自動運転の高次化における根本的なボトルネックが推論能力の欠如であると指摘し、大規模言語モデルを活用した認知エンジンの統合を提案する包括的なレビュー論文。

詳しい要約

1. どんなもの?

- 高レベル自動運転(AD)のボトルネックが知覚から推論へ移行していることを指摘するサーベイ。 - 現行ADは構造化環境では機能するが、long-tailシナリオや社会的相互作用で人間らしい判断を要する場面で失敗する。 - LLM/MLLMを認知エンジンとして統合する機会を論じ、体系的な枠組みの欠如を埋める。 - 推論をモジュールからシステムの認知コアへ昇格させるべきと主張。 - 新たなCognitive Hierarchyを提案し、運転タスクを認知・対話複雑性で分解。 - 7つの核心的推論課題(responsiveness-reasoning trade-off、social-game reasoning等)を導出・体系化。 - システム中心と評価中心の二視点で最先端をレビュー。 - 全体論的で解釈可能なglass-boxエージェントへの傾向を明らかにする。

2. 先行研究と比べてどこがすごい?

- 従来のAD研究は知覚中心の限界に焦点を当てていたが、本サーベイは推論の欠如を根本的ボトルネックとして位置づける。 - 既存のモジュール的推論ではなく、推論をシステムの認知コアに据える新たな視点を提供。 - LLM/MLLMの統合を体系化する枠組みが欠如していることを指摘し、Cognitive Hierarchyと7つの推論課題を提案。 - システム中心と評価中心の二視点レビューにより、holisticでinterpretableなglass-boxエージェントへの傾向を明示。 - 従来のパターンマッチングから真の理解への移行を促す点が新しい。

3. 技術・手法の肝は?

- 新たなCognitive Hierarchyを提案し、運転タスクを認知・対話複雑性に応じて分解。 - この階層に基づき7つの核心的推論課題(responsiveness-reasoning trade-off、social-game reasoning等)を導出・体系化。 - システム中心のアプローチ(知的エージェントの設計)と評価中心のアプローチ(検証手法)の二視点で最先端をレビュー。 - LLM/MLLMを認知エンジンとしてADに統合するための枠組みを提示。 - 推論をモジュールから認知コアへ昇格させる設計思想を強調。

4. どうやって有効だと検証した?

- 本稿はサーベイであり、新たな実験的検証は行っていない。 - 既存研究のシステム中心および評価中心のアプローチを二視点でレビューし、傾向を分析。 - その結果、holisticでinterpretableなglass-boxエージェントへの明確な傾向を明らかにした。 - 具体的な検証方法やデータセットは要旨からは不明。

5. 議論はある?

- LLMベース推論の高遅延・熟慮的性質と、車両制御のミリ秒スケール・安全クリティカルな要求との間に根本的で未解決の緊張関係がある。 - 将来課題として、symbolic-to-physicalギャップを埋める検証可能なneuro-symbolicアーキテクチャ、不確実性下での堅牢な推論、暗黙の社会的交渉のためのスケーラブルなモデルの開発を挙げる。 - 推論を認知コアに据えることの重要性を強調する一方、実現には課題が残る。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として、LLM/MLLMをADに統合する研究、neuro-symbolicアーキテクチャ、不確実性下の推論、社会的交渉モデルが挙げられる。 - 同分野の定番として、知覚中心のADシステム、モジュール型推論、end-to-end学習、強化学習ベースの意思決定などが考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kejin Yu, Yuhan Sun, Taiqiang Wu, Ruixu Zhang, Zhiqiang Lin, Yuxin Meng, Junjie Wang, Yujiu Yang

分類: cs.AI, cs.RO

原文アブストラクト

The development of high-level autonomous driving (AD) is shifting from perception-centric limitations to a more fundamental bottleneck, namely, a deficit in robust and generalizable reasoning. Although current AD systems manage structured environments, they consistently falter in long-tail scenarios and complex social interactions that require human-like judgment. Meanwhile, the advent of large language and multimodal models (LLMs and MLLMs) presents a transformative opportunity to integrate a powerful cognitive engine into AD systems, moving beyond pattern matching toward genuine comprehension. However, a systematic framework to guide this integration is critically lacking. To bridge this gap, we provide a comprehensive review of this emerging field and argue that reasoning should be elevated from a modular component to the system's cognitive core. Specifically, we first propose a novel Cognitive Hierarchy to decompose the monolithic driving task according to its cognitive and interactive complexity. Building on this, we further derive and systematize seven core reasoning challenges, such as the responsiveness-reasoning trade-off and social-game reasoning. Furthermore, we conduct a dual-perspective review of the state-of-the-art, analyzing both system-centric approaches to architecting intelligent agents and evaluation-centric practices for their validation. Our analysis reveals a clear trend toward holistic and interpretable "glass-box" agents. In conclusion, we identify a fundamental and unresolved tension between the high-latency, deliberative nature of LLM-based reasoning and the millisecond-scale, safety-critical demands of vehicle control. For future work, a primary objective is to bridge the symbolic-to-physical gap by developing verifiable neuro-symbolic architectures, robust reasoning under uncertainty, and scalable models for implicit social negotiation.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI