日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ビデオ生成/推論高速化arXiv:2603.22286

WorldCache: コンテンツ認識キャッシングによるビデオワールドモデルの高速化

WorldCache: Content-Aware Caching for Accelerated Video World Models

シェア:XThreadsFacebookLINEはてブBluesky

拡散トランスフォーマーを用いたビデオワールドモデルの推論を高速化するため、動き適応型しきい値やブレンディング・ワーピングによる特徴再利用を導入したトレーニング不要のキャッシング手法を提案。

詳しい要約

1. どんなもの?

- Diffusion Transformers (DiTs) を用いた高忠実度 video world models の推論を高速化する、training-free な feature caching フレームワーク。 - 名称は WorldCache。Perception-Constrained Dynamical Caching を掲げる。 - 対象は sequential denoising と spatio-temporal attention に起因する計算コスト。 - 再学習なしで motion-consistent な feature reuse を可能にする。

2. 先行研究と比べてどこがすごい?

- 既存の training-free feature caching は Zero-Order Hold 仮定に依存し、cached features を静的スナップショットとして再利用していた。 - その結果、dynamic scenes で ghosting artifacts、blur、motion inconsistencies が生じる。 - WorldCache は「いつ」「どのように」features を再利用するかを改善する。 - Cosmos-Predict2.5-2B / PAI-Bench で 2.3× の inference speedup と baseline quality の 99.4% 保持を達成し、prior training-free caching を大幅に上回る。

3. 技術・手法の肝は?

- motion-adaptive thresholds を導入。 - saliency-weighted drift estimation を用いる。 - optimal approximation via blending and warping を採用。 - phase-aware threshold scheduling across diffusion steps を行う。 - これらを統合し、retraining なしで adaptive かつ motion-consistent な feature reuse を実現。

4. どうやって有効だと検証した?

- Cosmos-Predict2.5-2B を PAI-Bench で評価。 - 2.3× の inference speedup を達成。 - baseline quality の 99.4% を保持。 - prior training-free caching approaches を大幅に上回る結果。

5. 議論はある?

- 既存手法の Zero-Order Hold 仮定が dynamic scenes で ghosting artifacts、blur、motion inconsistencies を招く点を問題視。 - 要旨からは不明。

6. 次に読むべき論文は?

- 比較対象として prior training-free caching approaches が挙げられているが、個別の論文名は要旨からは不明。 - 関連手法として Zero-Order Hold ベースの feature caching、Diffusion Transformers (DiTs)、video world models が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Umair Nawaz, Ahmed Heakl, Ufaq Khan, Abdelrahman Shaker, Salman Khan, Fahad Shahbaz Khan

分類: cs.CV, cs.AI, cs.CL, cs.LG

原文アブストラクト

Diffusion Transformers (DiTs) power high-fidelity video world models but remain computationally expensive due to sequential denoising and costly spatio-temporal attention. Training-free feature caching accelerates inference by reusing intermediate activations across denoising steps; however, existing methods largely rely on a Zero-Order Hold assumption i.e., reusing cached features as static snapshots when global drift is small. This often leads to ghosting artifacts, blur, and motion inconsistencies in dynamic scenes. We propose \textbf{WorldCache}, a Perception-Constrained Dynamical Caching framework that improves both when and how to reuse features. WorldCache introduces motion-adaptive thresholds, saliency-weighted drift estimation, optimal approximation via blending and warping, and phase-aware threshold scheduling across diffusion steps. Our cohesive approach enables adaptive, motion-consistent feature reuse without retraining. On Cosmos-Predict2.5-2B evaluated on PAI-Bench, WorldCache achieves \textbf{2.3$\times$} inference speedup while preserving \textbf{99.4\%} of baseline quality, substantially outperforming prior training-free caching approaches. Our code can be accessed on \href{https://umair1221.github.io/World-Cache/}{World-Cache}.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  4. 4GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI