日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転arXiv:2608.06008

Adaptive-WAM: 中間ビデオ拡散特徴からの品質誘導型早期終了計画

Adaptive-WAM: Quality-Guided Early-Exit Planning from Intermediate Video-Diffusion Features

シェア:XThreadsFacebookLINEはてブBluesky

ビデオ拡散モデルの全層を実行せず、中間層から軌道をデコードし、品質スコアに基づいて推論を早期終了する適応型プランナーを提案した。

詳しい要約

1. どんなもの?

Adaptive-WAMは、自動運転のためのego軌道計画を、大規模ビデオ拡散モデルの中間特徴から直接デコードする品質認識型マルチエグジットプランナーである。Wan2.2-5Bバックボーンに基づき、選択されたDiTブロックに軌道拡散ヘッドを付着させ、軽量な軌道品質スコアラーが品質閾値を満たすまで推論を継続し、満たした時点で早期終了する。これにより、将来ビデオ合成に必要な反復的なclassifier-free denoisingループとVAEデコードを回避し、バックボーン深さを動的に割り当てる。

2. 先行研究と比べてどこがすごい?

既存のworld-actionモデルは、展開時にはego軌道のみが必要であるにもかかわらず、反復的な将来ビデオ生成のコストを継承することが多い。Adaptive-WAMは、ビデオ拡散モデルのどの程度を実行すれば信頼できる運転判断ができるかという根本的な問いを立て、中間層から強い軌道をデコードできることを示した。さらに、品質に基づいて早期終了を動的に決定する点で、固定深さのプランナーや従来のビデオ生成ベースの手法よりも計算効率が高い。

3. 技術・手法の肝は?

手法の肝は、ビデオ拡散モデルの実行を段階的に行い、中間層に取り付けた軌道拡散ヘッドから軌道をデコードし、軽量な品質スコアラーがその軌道の品質を評価して閾値を満たせば推論を終了し、満たさなければキャッシュされた隠れ状態からより深いエグジットへ計算を継続する点である。これにより、将来ビデオ合成のための反復的なdenoisingループとVAEデコードを回避し、バックボーン深さを動的に割り当てる。

4. どうやって有効だと検証した?

NAVSIM上で適応型単一軌道プランナーが90.8 PDMSを達成し、固定エグジット変種は64プロポーザルで92.6 PDMSを達成した。さらに、NAVSIM v2で89.9 EPDMSを獲得し、比較したfront-viewビデオワールドモデルプランナーの中で最高の結果を得た。ターゲットドメインのファインチューニングなしでnuScenesに転送し、平均L2エラー0.88m、衝突率0.08%を達成した。A100上で、適応ルーティングはPDMSを90.62から90.79に改善し、平均エンドツーエンド計画レイテンシは170msで、固定ブロック15プランナーの190msより約10%低く、固定全深さプランナーの320msより47%低かった。

5. 議論はある?

要旨からは、計画性能がテストされたビデオノイズレベルにほぼ影響されない一方、中間層から強い軌道をデコードできるという観察に基づくが、この現象の理論的な説明や、異なるビデオ拡散モデルやデータセットでの一般化については議論されていない。また、品質スコアラーの閾値設定や、早期終了が安全性に与える影響についての詳細は不明である。

6. 次に読むべき論文は?

要旨で参照されている研究は、Wan2.2-5Bバックボーン、NAVSIM、nuScenes、および比較対象のfront-view video world-model plannersである。次に読むべき論文としては、これらの比較対象の具体的な手法(例:world-action models)や、ビデオ拡散モデルの中間特徴を利用した他の応用研究が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Sining Ang, Yuguang Yang, Yan Wang

分類: cs.RO

原文アブストラクト

Large video diffusion models provide rich spatiotemporal priors for autonomous driving, but existing world-action models often inherit the cost of iterative future-video generation even though deployment only requires an ego trajectory. We ask a more basic question: how much of a video diffusion model must be executed to make a reliable driving decision? Through a controlled study of video denoising timesteps and Diffusion Transformer (DiT) depth, we find that planning performance is largely insensitive to the tested video-noise levels, whereas strong trajectories can already be decoded from intermediate layers. Based on this observation, we introduce Adaptive-WAM, a quality-aware multi-exit planner built on a Wan2.2-5B backbone. Trajectory diffusion heads are attached to selected DiT blocks, and a lightweight trajectory-quality scorer terminates inference once the best trajectory decoded so far satisfies a quality threshold; otherwise, computation continues from the cached hidden state to a deeper exit. The deployed planner therefore avoids the iterative classifier-free denoising loop and VAE decoding required for future-video synthesis, while dynamically allocating backbone depth according to trajectory quality. On NAVSIM, the adaptive single-trajectory planner achieves 90.8 PDMS; a separate fixed-exit variant reaches 92.6 PDMS with 64 proposals. It further obtains 89.9 EPDMS on NAVSIM v2, yielding the best reported results among the compared front-view video world-model planners. Without target-domain fine-tuning, Adaptive-WAM transfers to nuScenes with 0.88 m average L2 error and a 0.08\% collision rate. On an A100, adaptive routing improves PDMS from 90.62 to 90.79 while averaging 170 ms end-to-end planning latency, approximately 10\% below the 190 ms fixed block-15 planner and 47\% below the 320 ms fixed full-depth planner. Code will be released.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI