日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転arXiv:2603.02528

LLM-MLFFN: 大規模言語モデルによるマルチレベル自動運転行動特徴融合

LLM-MLFFN: Multi-Level Autonomous Driving Behavior Feature Fusion via Large Language Model

シェア:XThreadsFacebookLINEはてブBluesky

自動運転車の運転行動分類の精度と解釈性を高めるため、大規模言語モデルを用いて数値特徴と意味的特徴を融合する新しいネットワークを提案した。Waymoデータセットで94%以上の分類精度を達成した。

詳しい要約

1. どんなもの?

- 自動運転車(AV)の運転行動分類を高精度化する LLM-MLFFN を提案。 - LLM を活用した多階層特徴融合ネットワーク。 - 3 要素: 多階層特徴抽出、意味記述、二チャネル融合。 - Waymo open trajectory dataset で 94% 超の分類精度。

2. 先行研究と比べてどこがすごい?

- 既存手法は数値時系列モデリング中心で意味的抽象化に欠ける。 - 解釈性と複雑交通環境での頑健性が限定的。 - LLM-MLFFN は大規模事前学習モデルの prior を統合。 - 多階層アプローチで分類精度を向上。 - 既存機械学習モデルを上回る性能。

3. 技術・手法の肝は?

- 多階層特徴抽出: 統計・行動・動的特徴を抽出。 - 意味記述モジュール: LLM で生データを高次意味特徴に変換。 - 二チャネル多階層特徴融合: 数値と意味特徴を重み付き attention で統合。 - 頑健性と予測精度を改善。

4. どうやって有効だと検証した?

- Waymo open trajectory dataset で評価。 - 分類精度 94% 超を達成。 - 既存機械学習モデルを上回る。 - Ablation studies で多階層融合・特徴抽出戦略・LLM 意味推論の寄与を検証。

5. 議論はある?

- 構造的特徴モデリングと言語駆動意味抽象化の統合が有効。 - 頑健な自動運転行動分類への原理的で解釈可能な経路を示唆。 - 具体的な限界や議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 同分野の定番として Waymo open trajectory dataset を用いた行動分類研究。 - LLM を活用した時系列・行動認識手法。 - マルチモーダル特徴融合ネットワーク。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xiangyu Li, Tianyi Wang, Xi Cheng, Rakesh Chowdary Machineni, Zhaomiao Guo, Sikai Chen, Junfeng Jiao, Christian Claudel

分類: cs.AI, cs.RO

原文アブストラクト

Accurate classification of autonomous vehicle (AV) driving behaviors is critical for safety validation, performance diagnosis, and traffic integration analysis. However, existing approaches primarily rely on numerical time-series modeling and often lack semantic abstraction, limiting interpretability and robustness in complex traffic environments. This paper presents LLM-MLFFN, a novel large language model (LLM)-enhanced multi-level feature fusion network designed to address the complexities of multi-dimensional driving data. The proposed LLM-MLFFN framework integrates priors from largescale pre-trained models and employs a multi-level approach to enhance classification accuracy. LLM-MLFFN comprises three core components: (1) a multi-level feature extraction module that extracts statistical, behavioral, and dynamic features to capture the quantitative aspects of driving behaviors; (2) a semantic description module that leverages LLMs to transform raw data into high-level semantic features; and (3) a dual-channel multi-level feature fusion network that combines numerical and semantic features using weighted attention mechanisms to improve robustness and prediction accuracy. Evaluation on the Waymo open trajectory dataset demonstrates the superior performance of the proposed LLM-MLFFN, achieving a classification accuracy of over 94%, surpassing existing machine learning models. Ablation studies further validate the critical contributions of multi-level fusion, feature extraction strategies, and LLM-derived semantic reasoning. These results suggest that integrating structured feature modeling with language-driven semantic abstraction provides a principled and interpretable pathway for robust autonomous driving behavior classification.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI