日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ビデオ生成/推論arXiv:2606.13861

テスト時生成ビデオ推論のための時間的バックトラッキング探索

Temporal Backtracking Search for Test-time Generative Video Reasoning

シェア:XThreadsFacebookLINEはてブBluesky

ビデオ生成モデルの推論を改善するため、時間軸上で生成・検証・再開を繰り返すTBS法を提案し、単発生成やBoNサンプリングより高い成功率を達成した。

詳しい要約

1. どんなもの?

生成ビデオ推論のための test-time scaling 手法 Temporal Backtracking Search (TBS) を提案する論文。 - 従来の single-shot パラダイムでは論理的に誤った rollout を救えない問題に対処。 - 探索空間を temporal axis に移し、generate-verify-restart の反復ループとしてビデオ生成を再構成。 - algorithmic, navigation, robotics 領域で評価。

2. 先行研究と比べてどこがすごい?

既存の test-time scaling と比較して優位性を示す。 - denoising steps 上の探索は、spatial trajectories が拡散過程の早期に確定するため論理破綻を救えない。 - Root-level Best-of-N (BoN) sampling は非効率で、推論誤りが temporal axis の早期に集中し、再サンプリングが検証済みの上流進捗を破棄する。 - TBS は matched-budget BoN を Pareto-dominates し、厳しい out-of-distribution 設定で BoN 0.7% に対し 22.7% を達成。

3. 技術・手法の肝は?

TBS の核心は3つのメカニズム。 - variable-K conditioning: 任意の clean prefixes から生成を再開可能。 - temporal process verification: 失敗を局所化し、有効な restart anchors を抽出。 - prefix-based search: root resampling ではなく正しい trajectories の延長に計算資源を再配分。

4. どうやって有効だと検証した?

algorithmic, navigation, robotics の領域で検証。 - matched-budget BoN と比較し Pareto-dominates を確認。 - 厳しい out-of-distribution 設定で one-shot 生成が崩壊する中 (BoN 0.7%)、TBS は 22.7% を達成。 - 解決した全エピソードが restarted branch に由来。

5. 議論はある?

ビデオモデルの局所的推論能力は single-shot rollouts が示すよりもはるかに高いことを明らかにする。 - それを引き出すスケーラブルな test-time フレームワークを提供。 - 具体的な限界や今後の課題は要旨からは不明。

6. 次に読むべき論文は?

要旨で参照/比較されている研究: Best-of-N (BoN) sampling, test-time scaling in large language models。 - 関連手法として diffusion models の denoising steps 探索。 - 同分野の定番として generative video reasoning の single-shot パラダイム。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Sejoon Jun, Zheng Ding, Huangyuan Su, Weirui Ye, Yilun Du

分類: cs.CV

原文アブストラクト

While test-time scaling has revolutionized reasoning in large language models, generative video reasoning remains bottlenecked by a single-shot paradigm. We demonstrate that searching over denoising steps cannot rescue logically flawed rollouts because spatial trajectories commit early in the diffusion process. Root-level Best-of-N (BoN) sampling is similarly inefficient: reasoning errors cluster early in the temporal axis, and resampling blindly discards verified upstream progress. To unlock effective test-time scaling for video models, we introduce Temporal Backtracking Search (TBS), which shifts the search space to the temporal axis. TBS transforms video generation into an iterative generate-verify-restart loop via three core mechanisms: (1) variable-K conditioning to resume generation from arbitrary clean prefixes; (2) temporal process verification to localize failures and extract valid restart anchors; and (3) prefix-based search to reallocate compute toward extending correct trajectories rather than root resampling. Across algorithmic, navigation, and robotics domains, TBS Pareto-dominates matched-budget BoN. In a strict out-of-distribution setting where one-shot generation collapses (0.7% for BoN), TBS achieves 22.7%, with every solved episode stemming from a restarted branch. Ultimately, TBS reveals that the local reasoning competence of video models far exceeds what single-shot rollouts indicate, providing a scalable test-time framework to unlock it.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI