日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2607.04816

CAC-VLA: 視覚言語行動モデルのための文脈ゲート型行動条件付け

CAC-VLA: Context-Gated Action Conditioning for Vision-Language-Action Models

シェア:XThreadsFacebookLINEはてブBluesky

VLAモデル内に軽量な潜在行動インターフェースを導入し、文脈ゲートで行動エキスパートへの影響を調整することで、ロボット操作の成功率を向上させた。

詳しい要約

1. どんなもの?

CAC-VLAは、Vision-Language-Action (VLA)モデルにおいて、VLM内部に直接学習される軽量な潜在アクションインターフェースを導入し、コンテキストゲートを介してアクションエキスパートの生成を条件付けるフレームワーク。VLMに粗密の潜在アクション予測を訓練し、実行可能な軌道を生成せずにアクション条件付けを実現する。

2. 先行研究と比べてどこがすごい?

従来のVLAモデルは視覚言語表現をアクション生成に直接用いるが、アクション条件付けに最適化されていない。近年のアクション推論手法は明示的なアクションプランや推論信号を追加するが、別途アクション生成フレームワークが必要。CAC-VLAはVLM内で直接潜在アクションを学習し、追加のアクション生成器を不要にする点が新しい。

3. 技術・手法の肝は?

手法の核は、VLMを訓練して将来のアクションセグメントからエンコードされた粗密の潜在アクションを予測させ、コンテキストゲートを用いてその潜在アクションのガイダンスをアクションエキスパートに適応的に条件付けすること。これにより、VLMネイティブなアクション条件付けと、エキスパート生成への影響の調整を実現する。

4. どうやって有効だと検証した?

LIBEROとLIBERO-Plusベンチマークで評価。LIBEROで平均成功率98.3%、LIBERO-Plusで89.5%を達成し、有効性を示した。

5. 議論はある?

要旨からは、提案手法の有効性は示されたが、潜在アクションの解釈性や、異なるタスクや環境での汎化性、他のVLAモデルへの適用可能性などに関する議論は不明。また、コンテキストゲートの設計選択や潜在アクションの表現方法の詳細な分析は要旨に含まれていない。

6. 次に読むべき論文は?

要旨で参照されている関連研究として、アクション推論手法(明示的なアクションプランやアクション空間推論信号を生成する手法)が挙げられる。具体的な論文名は不明だが、VLAモデルにおけるアクション条件付けや潜在アクション表現に関する研究が関連する。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yifu Xiong, Wenhao Yu, Jiaxuan Lin, Bojun Zou, Jiahao Li, Lu Zhang, Yanyong Zhang, Jianmin Ji

分類: cs.RO

原文アブストラクト

Vision-Language-Action (VLA) models have become a promising paradigm for generalist robot manipulation, where visual-language representations are used to condition continuous action generation. However, these representations are not explicitly optimized for action conditioning, leaving the action expert to bridge the gap between multimodal understanding and precise motor control. Recent action-reasoning methods introduce additional modules to generate explicit action plans or action-space reasoning signals, demonstrating the benefit of action-level guidance but often requiring separate action-generation frameworks. We propose CAC-VLA, a Context-Gated Action Conditioning framework that learns a lightweight latent-action interface directly within the VLM. Instead of generating executable trajectories, CAC-VLA trains the VLM to predict coarse-to-fine latent actions, which are structured representations encoded from future action segments, and adaptively leverages them to condition the action expert via a context gate. This enables VLM-native action conditioning while calibrating the influence of latent-action guidance on expert action generation. Experiments on LIBERO and LIBERO-Plus demonstrate the effectiveness of CAC-VLA, achieving 98.3% average success rate on LIBERO and 89.5% LIBERO-Plus, suggesting that context-gated latent-action conditioning is an effective interface for continuous expert control.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI