日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2602.15882

FUTURE-VLA: 実時間実行下での統合軌道予測

FUTURE-VLA: Forecasting Unified Trajectories Under Real-time Execution

シェア:XThreadsFacebookLINEはてブBluesky

長時間の映像履歴を効率的に圧縮し、潜在空間での自己回帰により将来の視覚予測と行動生成を単一のフォワードパスで行うVLAアーキテクチャを提案。予測に基づく人間参加型の実行ゲーティングも実現した。

詳しい要約

1. どんなもの?

- 長期的な制御と未来予測を単一のsequence-generationタスクとして再定式化した統合アーキテクチャFUTURE-VLAを提案。 - ロボット上での長horizon履歴処理と高次元未来予測のlatency問題を解決する。 - 時間適応的圧縮とlatent-space autoregressionにより、一定の推論latencyで広い時空間windowを扱う。 - prediction-guided Human-In-the-Loop機構を備える。

2. 先行研究と比べてどこがすごい?

- 従来のgeneral vision-language modelsは長video streamの統合的時空間推論を可能にするが、ロボット展開では長horizon履歴処理と高次元未来予測のlatencyが制約だった。 - FUTURE-VLAは単一forward passでactionable dynamicsとreviewable visual look-aheadsを整合させ、単一フレームbaselineの推論latencyを維持しつつ16倍の時空間windowを実現。 - LIBERO 99.2%、RoboTwin 75.4%、実機Piper 78.0%の成功率で新たなstate-of-the-artを達成。

3. 技術・手法の肝は?

- 長horizon制御と未来予測をmonolithic sequence-generationタスクとして再定式化。 - dual-sided efficiency paradigmを採用。 - temporally adaptive compression strategyで時空間情報密度を最大化し、多視点履歴を一定latencyで取り込む。 - latent-space autoregressionにより、actionable dynamicsとreviewable visual look-aheadsを単一forward passで整合。 - prediction-guided Human-In-the-Loop機構をinteractive execution gatingで実現。

4. どうやって有効だと検証した?

- 広範な評価を実施。 - LIBEROで99.2%、RoboTwinで75.4%、実世界Piper platformで78.0%の成功率を達成。 - 単一フレームbaselineの推論latencyを維持しつつ16倍の時空間windowを実現。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法としてgeneral vision-language models、LIBERO、RoboTwin、Piper platformが挙げられる。 - 同分野の定番としてvision-language-action models (VLAs) やlong-horizon robot learningに関する研究が考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jingjing Fan, Yushan Liu, Shoujie Li, Botao Ren, Siyuan Li, Xiao-Ping Zhang, Wenbo Ding, Zhidong Deng

分類: cs.RO, cs.AI

原文アブストラクト

General vision-language models increasingly support unified spatiotemporal reasoning over long video streams, yet deploying such capabilities on robots remains constrained by the prohibitive latency of processing long-horizon histories and generating high-dimensional future predictions. To bridge this gap, we present FUTURE-VLA, a unified architecture that reformulates long-horizon control and future forecasting as a monolithic sequence-generation task. Adopting a dual-sided efficiency paradigm, FUTURE-VLA leverages a temporally adaptive compression strategy to maximize spatiotemporal information density, enabling the ingestion of extensive multi-view histories while maintaining constant inference latency. Simultaneously, it performs latent-space autoregression to align actionable dynamics with reviewable visual look-aheads in a single forward pass. These real-time predictive capabilities further enable a prediction-guided Human-In-the-Loop mechanism via interactive execution gating, allowing operators to dynamically validate behaviors based on interpretable future previews. Extensive evaluations demonstrate that FUTURE-VLA establishes new state-of-the-art performance, attaining success rates of 99.2% on LIBERO, 75.4% on RoboTwin, and 78.0% on a real-world Piper platform, all with a $16\times$ extended spatiotemporal window while maintaining the inference latency of a single-frame baseline.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI