日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転/V2XarXiv:2606.21165

OmniV2X: 効率的なエンドツーエンド協調運転のための生成的基盤プランナー

OmniV2X: A Generative Foundation Planner for Efficient End-to-End Cooperative Driving

シェア:XThreadsFacebookLINEはてブBluesky

V2X協調運転のための生成的基盤モデルを提案し、マルチモーダル・マルチエージェント観測を直接解釈して軌道生成を行う。大規模単一エージェントデータで事前学習し、軽量なV2Xトークンで協調環境に適応することで、少ないデータと通信帯域で最先端性能を達成した。

詳しい要約

1. どんなもの?

- V2X協調運転のための生成的基盤モデル - マルチモーダル・マルチエージェント観測からなる独立コンテキスト系列を直接解釈 - 下流の軌道生成損失を用いたエンドツーエンド教師ありパイプラインで訓練 - 大規模単一エージェント計画データセットで事前学習し、軽量で標準準拠のV2Xトークンで協調環境に適応

2. 先行研究と比べてどこがすごい?

- 既存手法はマルチモーダル入力を共有表現に融合し、計算コスト大、データ不足に脆弱、標準メッセージングへの準拠が不十分 - OmniV2Xは密な3D知覚の計算コストを軽減し、データ不足に強く、標準準拠のV2Xトークンを統合 - DAIR-V2X-Seqで既存のエンドツーエンド協調運転ベースラインを上回り、10%未満の微調整V2Xデータセットと1%未満の通信帯域で最先端性能を達成

3. 技術・手法の肝は?

- 生成シーケンスプランナーがクロスアテンション注入を介してマルチモーダル入力を活用し、モデルを暗黙的に誘導 - 独立コンテキスト系列を直接解釈する設計 - 下流の軌道生成損失によるエンドツーエンド教師あり訓練 - 事前学習済みモデルを軽量で標準準拠のV2Xトークンと条件付けコンテキストの統合により協調環境に適応

4. どうやって有効だと検証した?

- DAIR-V2X-Seqデータセットで評価 - 既存のエンドツーエンド協調運転ベースラインと比較し、最先端性能を達成 - 10%未満の微調整V2Xデータセットと1%未満の通信帯域で性能を実現 - 実世界の制約下での計算効率とロバスト性を包括的に評価

5. 議論はある?

- 要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究: 既存のエンドツーエンド協調運転ベースライン(具体的名称は要旨に記載なし) - 関連手法: V2X協調運転、生成的基盤モデル、クロスアテンション注入、軌道生成

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Juntong Peng, Juanwu Lu, Yupeng Zhou, Can Cui, Yaobin Chen, Ziran Wang

分類: cs.RO, cs.AI

原文アブストラクト

We present OmniV2X, a generative foundation model for vehicle-to-everything (V2X) cooperative driving. The model directly interprets independent context sequences comprising multi-modal and multi-agent observations. The new design mitigates the computational cost of dense 3D perception, the vulnerability to data scarcity in cooperative scenarios, and the poor compliance with standardized messaging in existing methods that fuse multi-modal inputs into a shared representation. For training, we present an end-to-end supervised pipeline using a downstream trajectory generation loss, in which a high-capacity generative sequence planner implicitly learns to steer the model and leverage multi-modal inputs via cross-attention injection. As a foundation model, we demonstrate that OmniV2X pre-trained on large-scale single-agent planning datasets can efficiently adapt to cooperative environments by integrating the conditioning context with lightweight, standard-compliant V2X tokens. Evaluated on the DAIR-V2X-Seq dataset, OmniV2X outperforms existing end-to-end cooperative driving baselines, achieving state-of-the-art performance with less than 10% of the fine-tune V2X dataset and less than 1% of the communication bandwidth. We conduct comprehensive evaluations to demonstrate its computational efficiency and robustness under real-world constraints.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI