日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転arXiv:2605.19631

HEAT: 軌道誘導型ワールドモデルによる異種エンドツーエンド自動運転

HEAT: Heterogeneous End-to-End Autonomous Driving via Trajectory-Guided World Models

シェア:XThreadsFacebookLINEはてブBluesky

複数の異なる環境(都市、センサー構成、交通パターン)で単一モデルが高性能を維持できるよう、軌道計画を中心とした学習パラダイムと将来の潜在特徴を予測するワールドモデルを導入し、ドメイン不変の運転意図表現を獲得する手法を提案した。

詳しい要約

1. どんなもの?

- 複数のheterogeneousなdomainを統合して学習するend-to-end autonomous drivingの手法。 - 都市・sensor構成・交通パターンが異なる環境でもdomain-specific retrainingなしで動作することを目指す。 - trajectory-driven learning paradigmとworld modelを組み合わせ、単一のunified modelを実現する。

2. 先行研究と比べてどこがすごい?

- 従来のend-to-end手法はsingle-domain datasetでは高性能だが、複数domainのjoint trainingで性能が大きく劣化する。 - 本研究はheterogeneous domain間のconflicting learning signalsによる妥協解を回避し、全domainで大幅な改善を示す。 - 単一モデルで各domain内の性能を維持しつつheterogeneous datasetで学習可能にした点が新しい。

3. 技術・手法の肝は?

- 学習をplanning trajectories中心に組織するtrajectory-driven learning paradigmを提案。 - これによりdriving intentのdomain-invariant representationを獲得する。 - さらにworld modelを導入し、ego actionsを条件としてfuture latent featuresを予測。 - これがfeature consistencyを高め、domain-induced biasesを緩和する。

4. どうやって有効だと検証した?

- nuScenes、NAVSIM、Waymo end-to-end datasetの3つのbenchmarkで評価。 - すべてのdomainにおいて既存手法に対するsubstantial improvementsを示した。 - 単一のunified modelがheterogeneous datasetで学習され、各domain内で強い性能を維持することを確認。

5. 議論はある?

- heterogeneous domain間のdomain-specific variationsがconflicting learning signalsを生み、妥協解に導く問題を指摘。 - trajectory-driven paradigmとworld modelがこの問題を緩和することを示す。 - scalable real-world deploymentへの一歩と位置づけるが、限界や今後の課題の詳細は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法としてend-to-end autonomous driving、world model、multi-domain learning、nuScenes、NAVSIM、Waymo end-to-end datasetが挙げられる。 - 同分野の定番としてmodular pipelinesや既存のend-to-end driving手法を読むべき。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Hoonhee Cho, Giwon Lee, Jae-Young Kang, Hyemin Yang, Heejun Park, Kuk-Jin Yoon

分類: cs.RO, cs.CV

原文アブストラクト

End-to-end autonomous driving has emerged as a compelling alternative to traditional modular pipelines by directly mapping raw sensor data to driving actions. While recent approaches achieve strong performance on single-domain datasets, their performance degrades significantly when trained jointly across multiple heterogeneous domains. In practice, however, autonomous systems must operate across diverse environments with heterogeneous distributions, including different cities, sensor configurations, and traffic patterns, without domain-specific retraining. This gap highlights a key challenge in multi-domain learning: domain-specific variations across heterogeneous domains introduce conflicting learning signals, driving models toward compromised solutions that are suboptimal across domains. To address this, we propose a trajectory-driven learning paradigm that organizes training around planning trajectories, enabling the model to capture domain-invariant representations of driving intent. Furthermore, we incorporate a world model that predicts future latent features conditioned on ego actions, improving feature consistency and mitigating domain-induced biases. We evaluate our approach on three benchmarks, nuScenes, NAVSIM, and the Waymo end-to-end dataset, and show substantial improvements over existing methods across all domains. Our results demonstrate that a single unified model can be trained on heterogeneous datasets while maintaining strong performance within each domain, highlighting a step toward scalable real-world deployment. We will make our code publicly available.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI