日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2509.18053

V2V-GoT: マルチモーダル大規模言語モデルと思考グラフによる車車間協調自動運転

V2V-GoT: Vehicle-to-Vehicle Cooperative Autonomous Driving with Multimodal Large Language Models and Graph-of-Thoughts

シェア:XThreadsFacebookLINEはてブBluesky

車車間通信とマルチモーダル大規模言語モデルを組み合わせ、思考グラフ推論を用いて遮蔽物がある状況でも協調的な知覚・予測・計画を行う手法を提案した。

詳しい要約

1. どんなもの?

- 遮蔽物により local sensors が塞がれる safety-critical 状況に対処する V2V cooperative autonomous driving の研究 - MLLM を用いた協調認識・計画フレームワークに graph-of-thoughts 推論を導入する V2V-GoT を提案 - occlusion-aware perception と planning-aware prediction を含む新規 graph-of-thoughts を設計 - V2V-GoT-QA dataset を構築し、V2V-GoT model を訓練・評価

2. 先行研究と比べてどこがすごい?

- 従来の V2V cooperative autonomous driving は local sensors の遮蔽問題に対処する枠組みを提案 - 先行研究は MLLM で協調認識と計画を統合したが、graph-of-thoughts 推論は未検討 - 本研究は MLLM ベース協調運転向け graph-of-thoughts を初めて設計 - occlusion-aware perception と planning-aware prediction という新規要素を導入

3. 技術・手法の肝は?

- MLLM ベース cooperative autonomous driving 用の graph-of-thoughts framework を構築 - graph-of-thoughts に occlusion-aware perception を組み込み遮蔽を考慮した認識を実現 - planning-aware prediction により計画を意識した予測を統合 - V2V-GoT-QA dataset を整備し V2V-GoT model を訓練・テスト

4. どうやって有効だと検証した?

- V2V-GoT-QA dataset を用いて V2V-GoT model を訓練・テスト - cooperative perception、prediction、planning の各タスクで実験 - 提案手法が他の baselines を上回る結果を報告 - 詳細な評価指標や実験設定は要旨からは不明

5. 議論はある?

- graph-of-thoughts を協調運転に適用する有効性を示唆 - occlusion-aware perception と planning-aware prediction の寄与を主張 - 限界や失敗事例、計算コスト、real-time 性などの議論は要旨からは不明 - dataset の規模や多様性に関する議論も要旨からは不明

6. 次に読むべき論文は?

- MLLM を用いた cooperative autonomous driving の先行フレームワーク(本研究が拡張対象とする手法) - graph-of-thoughts 推論に関する一般的な研究 - V2V cooperative perception の代表的手法 - multimodal large language model を用いた autonomous driving の関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Hsu-kuang Chiu, Ryo Hachiuma, Chien-Yi Wang, Yu-Chiang Frank Wang, Min-Hung Chen, Stephen F. Smith

分類: cs.RO

原文アブストラクト

Current state-of-the-art autonomous vehicles could face safety-critical situations when their local sensors are occluded by large nearby objects on the road. Vehicle-to-vehicle (V2V) cooperative autonomous driving has been proposed as a means of addressing this problem, and one recently introduced framework for cooperative autonomous driving has further adopted an approach that incorporates a Multimodal Large Language Model (MLLM) to integrate cooperative perception and planning processes. However, despite the potential benefit of applying graph-of-thoughts reasoning to the MLLM, this idea has not been considered by previous cooperative autonomous driving research. In this paper, we propose a novel graph-of-thoughts framework specifically designed for MLLM-based cooperative autonomous driving. Our graph-of-thoughts includes our proposed novel ideas of occlusion-aware perception and planning-aware prediction. We curate the V2V-GoT-QA dataset and develop the V2V-GoT model for training and testing the cooperative driving graph-of-thoughts. Our experimental results show that our method outperforms other baselines in cooperative perception, prediction, and planning tasks. Our project website: https://eddyhkchiu.github.io/v2vgot.github.io/ .

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI