日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転/世界モデルarXiv:2512.18850

InDRiVE: 潜在的不一致に基づく報酬なし世界モデル事前学習による自動運転

InDRiVE: Reward-Free World-Model Pretraining for Autonomous Driving via Latent Disagreement

シェア:XThreadsFacebookLINEはてブBluesky

潜在アンサンブルの不一致を内在的報酬として用い、CARLAで報酬なしに世界モデルを事前学習し、未知の街や経路へのゼロショット転移と少数ショット適応を実現した。

詳しい要約

1. どんなもの?

- 自動運転向けの MBRL 手法 InDRiVE の提案 - DreamerV3 スタイルの MBRL エージェント - CARLA 上で reward-free の pretraining を実施 - latent ensemble disagreement を intrinsic motivation として利用 - 学習した world model から imagination-based actor-critic で探索 policy を獲得 - pretraining 後はパラメータを凍結し unseen towns/routes で zero-shot 評価 - 限られた extrinsic feedback による few-shot adaptation も検討

2. 先行研究と比べてどこがすごい?

- 従来の MBRL は task-specific reward に依存し、設計が困難で分布シフトに脆い - InDRiVE は reward を一切使わず、latent ensemble disagreement のみで pretraining - disagreement を epistemic uncertainty の代理として活用し未探索状況へ誘導 - planner-free の探索 policy を world model から直接学習 - 同一 interaction budget 下で town shift に対する zero-shot 頑健性と few-shot 衝突回避の頑健性を向上

3. 技術・手法の肝は?

- DreamerV3 ベースの MBRL エージェント - latent ensemble の disagreement を intrinsic reward として使用 - epistemic uncertainty の proxy として機能 - 未探索の走行状況への探索を促進 - imagination-based actor-critic により world model 内で探索 policy を学習 - pretraining 後は全パラメータを凍結して zero-shot transfer を評価 - few-shot では限られた extrinsic feedback で下流タスク policy を学習(lane following, collision avoidance)

4. どうやって有効だと検証した?

- CARLA 上で towns, routes, traffic densities を変えて実験 - zero-shot transfer: pretrained 探索 policy を凍結し unseen towns/routes に展開 - few-shot adaptation: 限定 extrinsic feedback で下流タスクを学習 - disagreement-based pretraining が zero-shot 頑健性と town shift 下の few-shot 衝突回避で優位 - matched interaction budgets での比較を実施

5. 議論はある?

- intrinsic disagreement が再利用可能な driving world model の実用的な reward-free pretraining signal となり得ることを支持 - 議論の詳細や限界(計算コスト、ensemble 設計、他タスクへの一般化など)は要旨からは不明 - 実車への転移や安全性評価については要旨からは不明

6. 次に読むべき論文は?

- DreamerV3(本手法のベースとなる MBRL エージェント) - latent ensemble disagreement を用いた intrinsic motivation の先行研究(例: Plan2Explore など) - CARLA を用いた autonomous driving 向け MBRL/world model 研究 - reward-free pretraining / zero-shot transfer に関する強化学習研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Feeza Khan Khanzada, Jaerock Kwon

分類: cs.RO

原文アブストラクト

Model-based reinforcement learning (MBRL) can reduce interaction cost for autonomous driving by learning a predictive world model, but it typically still depends on task-specific rewards that are difficult to design and often brittle under distribution shift. This paper presents InDRiVE, a DreamerV3-style MBRL agent that performs reward-free pretraining in CARLA using only intrinsic motivation derived from latent ensemble disagreement. Disagreement acts as a proxy for epistemic uncertainty and drives the agent toward under-explored driving situations, while an imagination-based actor-critic learns a planner-free exploration policy directly from the learned world model. After intrinsic pretraining, we evaluate zero-shot transfer by freezing all parameters and deploying the pretrained exploration policy in unseen towns and routes. We then study few-shot adaptation by training a task policy with limited extrinsic feedback for downstream objectives (lane following and collision avoidance). Experiments in CARLA across towns, routes, and traffic densities show that disagreement-based pretraining yields stronger zero-shot robustness and robust few-shot collision avoidance under town shift and matched interaction budgets, supporting the use of intrinsic disagreement as a practical reward-free pretraining signal for reusable driving world models.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI