日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2606.13355

自己回帰ポリシーによるリアルタイム実行

Real-Time Execution with Autoregressive Policies

シェア:XThreadsFacebookLINEはてブBluesky

自己回帰型の視覚言語行動モデルをリアルタイムで実行する手法を提案し、トークン化の調整と制約付きデコードにより遅延を保証して性能を向上させることを示した。

詳しい要約

1. どんなもの?

- 大規模 Vision-Language-Action モデルの実運用に不可欠な real-time execution を、autoregressive policies で実現する研究。 - asynchronous inference により滑らかな行動軌道と高速反応性を両立。 - tokenization horizon の調整と constrained decoding を適用し、厳密な latency bounds を保証。 - これにより multi-trajectory decoding を可能にし性能を最大化。

2. 先行研究と比べてどこがすごい?

- 従来の real-time execution 研究は主に diffusion policies の変種に焦点。 - autoregressive policies は synchronous inference での rollout が遅く、より重要だが未検討だった。 - 本研究は autoregressive policies でも real-time execution が可能であることを示す。 - 同等レベルの flow-matching policy と比較して一貫して性能を上回る。

3. 技術・手法の肝は?

- tokenization horizon を調整。 - constrained decoding を適用。 - これにより厳密な latency bounds を保証。 - その結果 multi-trajectory decoding が可能となり性能を最大化。 - asynchronous inference を活用。

4. どうやって有効だと検証した?

- simulated 環境と real-world 環境の両方で検証。 - autoregressive policy が同等レベルの flow-matching policy を一貫して上回ることを確認。 - synchronous inference と比較してタスク完了速度が大幅に改善。 - 詳細な評価指標やデータセットは要旨からは不明。

5. 議論はある?

- autoregressive policies の固有の利点として faster convergence と instruction-following における better generalizability を挙げる。 - これらの結果から autoregressive policies が real-time execution を支える競争力のある policy type であり続けると結論。 - 限界や課題についての議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究: diffusion policies の変種、flow-matching policy。 - 関連手法: asynchronous inference、constrained decoding、multi-trajectory decoding。 - 同分野の定番: Vision-Language-Action モデル、autoregressive policies、diffusion policies。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Sangkyu Lee, Seohyeon Park, Tackgeun You, Avi Caciularu, Idan Szpektor, Hwasup Lim, Youngjae Yu

分類: cs.RO, cs.AI

原文アブストラクト

Real-time execution, enabled by asynchronous inference that ensures both smooth action trajectories and fast reactivity, is critical for realistic deployments of large-scale Vision-Language-Action models. However, recent work on real-time execution primarily focuses on variants of diffusion policies, even though it is more critical for autoregressive policies given their slower rollout speed in synchronous inference. In contrast, we demonstrate that autoregressive policies can achieve real-time execution by adjusting the tokenization horizon and applying constrained decoding, thereby guaranteeing strict latency bounds that enable multi-trajectory decoding to maximize performance. Across simulated and real-world environments, we find that the autoregressive policy consistently outperforms its equivalent-level flow-matching policy counterpart while achieving significantly improved task completion speeds from synchronous inference. Coupled with the inherent advantages of autoregressive policies, such as faster convergence and better generalizability in instruction-following, these results confirm that autoregressive policies can remain a competitive policy type supporting real-time execution.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI