日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

動画推論arXiv:2602.20159

超大規模動画推論スイート

A Very Big Video Reasoning Suite

シェア:XThreadsFacebookLINEはてブBluesky

200種類の推論タスクと100万本以上の動画からなる大規模データセットVBVRと、ルールベースで検証可能な評価ベンチマークVBVR-Benchを構築し、動画推論のスケーリング則と未見タスクへの汎化の兆候を示した。

詳しい要約

1. どんなもの?

- ビデオ推論の大規模データセットと評価フレームワーク - VBVR Dataset: 200の推論タスク、100万以上のビデオクリップ - VBVR-Bench: ルールベースの評価ツール - ビデオモデルの推論能力を体系的に研究する基盤 - データ、ベンチマーク、モデルを公開

2. 先行研究と比べてどこがすごい?

- 既存データセットより約3桁大きい規模 - ビデオ推論のスケーリング研究を可能に - モデルベースの評価を超え、ルールベースで再現可能な評価を提供 - 未見タスクへの汎化の兆候を観察

3. 技術・手法の肝は?

- 原則的なタクソノミーに基づく200の推論タスクをキュレーション - 100万以上のビデオクリップを収集 - ルールベースで人間に整合したスコアラーを組み込んだ評価フレームワーク - 大規模スケーリング研究を実施

4. どうやって有効だと検証した?

- VBVRスイートを活用した大規模スケーリング研究 - 未見の推論タスクへの創発的汎化の初期兆候を観察 - ルールベースのスコアラーによる再現可能で解釈可能な診断 - 具体的な検証方法の詳細は要旨からは不明

5. 議論はある?

- ビデオ推論のスケーリング挙動の初期兆候 - 汎化可能性に関する議論 - 限界や課題については要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない - 同分野の定番: VideoQA, CLEVRER, Something-Something, Kinetics, UCF101, HMDB51

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Maijunxian Wang, Ruisi Wang, Juyi Lin, Ran Ji, Thaddäus Wiedemer, Qingying Gao, Dezhi Luo, Yaoyao Qian, Lianyu Huang, Zelong Hong, Jiahui Ge, Qianli Ma, Hang He, Yifan Zhou, Lingzi Guo, Lantao Mei, Jiachen Li, Hanwen Xing, Tianqi Zhao, Fengyuan Yu, Weihang Xiao, Yizheng Jiao, Jianheng Hou, Danyang Zhang, Pengcheng Xu, Boyang Zhong, Zehong Zhao, Gaoyun Fang, John Kitaoka, Yile Xu, Hua Xu, Kenton Blacutt, Tin Nguyen, Siyuan Song, Haoran Sun, Shaoyue Wen, Linyang He, Runming Wang, Yanzhi Wang, Mengyue Yang, Ziqiao Ma, Raphaël Millière, Freda Shi, Nuno Vasconcelos, Daniel Khashabi, Alan Yuille, Yilun Du, Ziming Liu, Bo Li, Dahua Lin, Ziwei Liu, Vikash Kumar, Yijiang Li, Lei Yang, Zhongang Cai, Hokin Deng

分類: cs.CV, cs.AI, cs.LG, cs.MM, cs.RO

原文アブストラクト

Rapid progress in video models has largely focused on visual quality, leaving their reasoning capabilities underexplored. Video reasoning grounds intelligence in spatiotemporally consistent visual environments that go beyond what text can naturally capture, enabling intuitive reasoning over spatiotemporal structure such as continuity, interaction, and causality. However, systematically studying video reasoning and its scaling behavior is hindered by the lack of large-scale training data. To address this gap, we introduce the Very Big Video Reasoning (VBVR) Dataset, an unprecedentedly large-scale resource spanning 200 curated reasoning tasks following a principled taxonomy and over one million video clips, approximately three orders of magnitude larger than existing datasets. We further present VBVR-Bench, a verifiable evaluation framework that moves beyond model-based judging by incorporating rule-based, human-aligned scorers, enabling reproducible and interpretable diagnosis of video reasoning capabilities. Leveraging the VBVR suite, we conduct one of the first large-scale scaling studies of video reasoning and observe early signs of emergent generalization to unseen reasoning tasks. Together, VBVR lays a foundation for the next stage of research in generalizable video reasoning. The data, benchmark toolkit, and models are publicly available at https://video-reason.com/ .

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI