日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2603.10126

AR-VLA: 視覚言語行動モデルのための真の自己回帰型アクションエキスパート

AR-VLA: True Autoregressive Action Expert for Vision-Language-Action Models

シェア:XThreadsFacebookLINEはてブBluesky

観測ごとに時間的文脈をリセットする従来のVLAや拡散ポリシーと異なり、長期記憶で履歴を保持し連続的な因果系列として行動を生成する自己回帰型アクションエキスパートを提案。再アンカリング機構で非同期な視覚・言語・行動を同期させ、滑らかで文脈認識型の行動生成を実現した。

詳しい要約

1. どんなもの?

- 提案: AR-VLA は Vision-Language-Action (VLA) モデル向けの standalone autoregressive (AR) Action Expert。 - 特徴: 連続的な causal sequence として action を生成し、refreshable な vision-language prefix に条件付け。 - 従来との違い: 各 observation で temporal context をリセットする reactive な VLA や diffusion policy と異なり、long-lived memory で自身の history を保持し、本質的に context-aware。 - 目的: 高速制御と低速推論の周波数ミスマッチを解消し、kinematic syntax の独立事前学習と重い perception backbone との modular 統合を可能に。 - 効果: フレーム間で時空間的に一貫した action 生成を自然に保証。

2. 先行研究と比べてどこがすごい?

- 先行: 既存 VLA や diffusion policy は新しい observation ごとに temporal context をリセットし、reactive に action を予測。 - 差分: AR-VLA は long-lived memory で history を維持し、context-aware に action を生成。 - 利点: 高速制御と低速推論の周波数ミスマッチを構造的に解決。 - 性能: 専門家・汎用ポリシー双方で chunk-based action head を置換可能。 - 結果: 履歴認識と軌道平滑性で優位、成功率は reactive VLA と同等以上。

3. 技術・手法の肝は?

- 中核: standalone autoregressive (AR) Action Expert が連続 action を causal sequence として生成。 - 条件付け: refreshable な vision-language prefix を利用。 - 記憶: long-lived memory で自身の history を保持。 - 同期: re-anchoring mechanism で非同期な hybrid V-L-A modality を同期。 - 詳細: 訓練・推論時の perception staleness を数学的に補正。 - 統合: kinematic syntax の独立事前学習と modular な perception backbone 統合を可能に。

4. どうやって有効だと検証した?

- 環境: シミュレーションと実ロボットの manipulation タスク。 - 比較: 専門家・汎用ポリシーで chunk-based action head を置換可能か検証。 - 指標: 履歴認識、action trajectory の平滑性、タスク成功率。 - 結果: 履歴認識と平滑性で優位、成功率は state-of-the-art reactive VLA と同等以上。 - 提供: コードとビデオを https://arvla.insait.ai で公開。

5. 議論はある?

- 主張: 高速制御と低速推論の周波数ミスマッチを構造的に解決。 - 利点: 時空間的一貫性、独立事前学習、modular 統合。 - 課題: 非同期 hybrid V-L-A modality の同期、perception staleness の補正。 - 限界: 要旨からは不明。 - 将来: scalable で context-aware な action 生成スキーマの基盤を提供。

6. 次に読むべき論文は?

- 関連: 既存 Vision-Language-Action (VLA) モデル、diffusion policy、chunk-based action head。 - 比較: reactive VLA との比較が要旨で言及。 - 参照: 具体的な論文名は要旨からは不明。 - 同分野: ロボティクス manipulation における VLA や diffusion policy の定番研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yutong Hu, Jan-Nico Zaech, Nikolay Nikolov, Yuanqi Yao, Sombit Dey, Giuliano Albanese, Renaud Detry, Luc Van Gool, Danda Paudel

分類: cs.RO, cs.AI

原文アブストラクト

We propose a standalone autoregressive (AR) Action Expert that generates actions as a continuous causal sequence while conditioning on refreshable vision-language prefixes. In contrast to existing Vision-Language-Action (VLA) models and diffusion policies that reset temporal context with each new observation and predict actions reactively, our Action Expert maintains its own history through a long-lived memory and is inherently context-aware. This structure addresses the frequency mismatch between fast control and slow reasoning, enabling efficient independent pretraining of kinematic syntax and modular integration with heavy perception backbones, naturally ensuring spatio-temporally consistent action generation across frames. To synchronize these asynchronous hybrid V-L-A modalities, we utilize a re-anchoring mechanism that mathematically accounts for perception staleness during both training and inference. Experiments on simulated and real-robot manipulation tasks demonstrate that the proposed method can effectively replace traditional chunk-based action heads for both specialist and generalist policies. AR-VLA exhibits superior history awareness and substantially smoother action trajectories while maintaining or exceeding the task success rates of state-of-the-art reactive VLAs. Overall, our work introduces a scalable, context-aware action generation schema that provides a robust structural foundation for training effective robotic policies. Code and Videos available at https://arvla.insait.ai

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI