日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2606.07895

TBD-VLA: 時間ブロック拡散を用いた視覚言語行動モデル

TBD-VLA: Temporal Block Diffusion Vision Language Action Model

シェア:XThreadsFacebookLINEはてブBluesky

離散トークン型の視覚言語行動モデル(VLA)において、行動系列を時間ブロックに分割し、ブロック内ではマスク拡散、ブロック間では自己回帰生成を行うことで、時間的一貫性と推論速度を両立する新しいフレームワークを提案した。シミュレーションと実機操作タスクで既存手法を上回る性能を示した。

詳しい要約

1. どんなもの?

- 離散トークン型 VLA の新フレームワーク TBD-VLA を提案。 - 行動生成を next-token prediction ではなく、temporal block 単位の masked discrete diffusion で行う。 - block 内は並列デコード、block 間は autoregressive 生成。 - 時間的一貫性と推論速度の両立を狙う。 - Real-Time Chunking など非同期実行も可能にする。

2. 先行研究と比べてどこがすごい?

- 従来の離散 VLA は next-token prediction で推論遅延が大きく、行動軌跡の時間構造を軽視。 - 並列デコード手法は高速だがトークン依存を明示的に扱わない。 - TBD-VLA は block diffusion で時間的 autoregression と並列デコードを統合。 - シミュレーションと実世界タスクで先行 VLA を大きく上回る。

3. 技術・手法の肝は?

- 行動系列を temporal block に分割。 - 各 block 内で masked discrete diffusion を適用。 - block 間は autoregressive に生成。 - これにより時間的 autoregression と並列 action decoding を統合。 - 明示的時間モデリングにより temporal in-painting で action chunk の非同期実行を実現。

4. どうやって有効だと検証した?

- シミュレーションと実世界の manipulation タスクで評価。 - 先行 VLA 手法と比較し大幅に性能向上。 - 詳細なベンチマーク名や指標は要旨からは不明。

5. 議論はある?

- 離散 VLA の高速化と時間認識を両立する scalable な方向性を示す。 - 推論速度と時間的一貫性のトレードオフを block diffusion で緩和。 - 限界や失敗事例、計算コストの詳細は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている具体的な先行研究は明示されていない。 - 関連手法として discrete VLA、parallel decoding、masked discrete diffusion、Real-Time Chunking が挙げられる。 - 同分野の定番として RT-1、RT-2、OpenVLA、Diffusion Policy などが次に読む候補。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Sung-Wook Lee, Xuhui Kang, Yen-Ling Kuo

分類: cs.CV, cs.RO

原文アブストラクト

Discrete Vision-Language-Action (VLA) models typically formulate action generation as next-token prediction over discretized action spaces, conditioning each token autoregressively on prior context. While effective, this paradigm incurs high inference latency and largely ignores the temporal structure inherent in action trajectories. Recent efforts introduce parallel decoding to improve efficiency, enabling faster inference, but lack explicit mechanisms for modeling token dependencies. We introduce TBD-VLA, a discrete token-based VLA framework that incorporates block diffusion to enable temporal action generation. We partition action sequences into temporal blocks and perform masked discrete diffusion within each block, while maintaining autoregressive generation across blocks. This design unifies temporal autoregression and parallel action decoding, achieving both strong temporal coherence and improved inference speed. In addition, the explicit temporal modeling enables asynchronous execution of action chunks (e.g., Real-Time Chunking) via temporal in-painting. TBD-VLA significantly outperforms prior VLA approaches in both simulation and real-world manipulation tasks, offering a scalable path toward fast, temporally aware, discrete VLA models. Project webpage: https://tbd-vla.github.io/

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI