日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2511.18950

Compressor-VLA: 指示に基づく視覚トークン圧縮による効率的なロボットマニピュレーション

Compressor-VLA: Instruction-Guided Visual Token Compression for Efficient Robotic Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

言語指示に応じて視覚トークンを動的に圧縮する2段階の手法を提案し、VLAモデルの計算量を削減しつつLIBEROベンチマークで高い成功率と実機転移を実現した。

詳しい要約

1. どんなもの?

- Vision-Language-Action (VLA) モデル向けの視覚トークン圧縮フレームワーク - 名称は Compressor-VLA - 言語指示(instruction)で変調されるハイブリッド型の圧縮を採用 - 目的はロボット実運用時の計算オーバーヘッド削減 - 冗長な視覚トークン処理がリアルタイム展開のボトルネック - 2つの圧縮モジュールで構成 - Semantic Task Compressor (STC): タスク関連の全体的文脈を蒸留 - Spatial Refinement Compressor (SRC): 細粒度の空間詳細を保持 - 対象タスクはロボットマニピュレーション

2. 先行研究と比べてどこがすごい?

- 従来の token pruning は task-agnostic であり、タスク上重要な視覚情報の保持が困難 - Compressor-VLA は自然言語指示で圧縮を動的に変調 - タスク指向の適応的な視覚情報凝縮を実現 - 全体的文脈(STC)と細粒度詳細(SRC)の両立を狙う点が特徴 - ベースライン比で FLOPs 59% 削減、視覚トークン数 3倍以上削減を報告 - 具体的な比較対象手法名は要旨からは不明

3. 技術・手法の肝は?

- 指示条件付き(instruction-conditioned)のハイブリッド圧縮フレームワーク - Semantic Task Compressor (STC) - タスクに関連する全体的コンテキストを蒸留 - Spatial Refinement Compressor (SRC) - 細かい空間的詳細を保持 - 自然言語指示により圧縮を動的に変調 - タスク関連視覚情報を適応的に凝縮 - 圧縮率や各モジュールの具体的アーキテクチャは要旨からは不明

4. どうやって有効だと検証した?

- LIBERO benchmark での評価 - 競争力のある success rate を達成 - ベースライン比で FLOPs 59% 削減、視覚トークン数 3倍以上削減 - dual-arm robot platform での実機展開 - sim-to-real 転移性と実用性を検証 - 定性分析 - 指示ガイダンスがタスク関連物体へ知覚的焦点を動的に誘導することを確認

5. 議論はある?

- 指示ガイダンスにより知覚的焦点がタスク関連物体へ動的に向くことを定性分析で示唆 - 実機 dual-arm robot platform での適用可能性を確認 - 限界や失敗事例、圧縮による情報損失の議論は要旨からは不明 - 他タスク・他環境への汎化性の議論は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない - 関連手法として以下が候補 - Vision-Language-Action (VLA) モデル全般 - token pruning(タスク非依存の視覚トークン削減) - LIBERO benchmark を用いた VLA 研究 - sim-to-real 転移を扱うロボットマニピュレーション研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Juntao Gao, Feiyang Ye, Jing Zhang, Wenjing Qian

分類: cs.RO, cs.CV, cs.LG

原文アブストラクト

Vision-Language-Action (VLA) models have emerged as a powerful paradigm in Embodied AI. However, the significant computational overhead of processing redundant visual tokens remains a critical bottleneck for real-time robotic deployment. While standard token pruning techniques can alleviate this, these task-agnostic methods struggle to preserve task-critical visual information. To address this challenge, simultaneously preserving both the holistic context and fine-grained details for precise action, we propose Compressor-VLA, a novel hybrid instruction-conditioned token compression framework designed for efficient, task-oriented compression of visual information in VLA models. The proposed Compressor-VLA framework consists of two token compression modules: a Semantic Task Compressor (STC) that distills holistic, task-relevant context, and a Spatial Refinement Compressor (SRC) that preserves fine-grained spatial details. This compression is dynamically modulated by the natural language instruction, allowing for the adaptive condensation of task-relevant visual information. Experimentally, extensive evaluations demonstrate that Compressor-VLA achieves a competitive success rate on the LIBERO benchmark while reducing FLOPs by 59% and the visual token count by over 3x compared to its baseline. The real-robot deployments on a dual-arm robot platform validate the model's sim-to-real transferability and practical applicability. Moreover, qualitative analyses reveal that our instruction guidance dynamically steers the model's perceptual focus toward task-relevant objects, thereby validating the effectiveness of our approach.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI