日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2509.22093

動作認識型動的プルーニングによる効率的なVision-Language-Actionマニピュレーション

Action-aware Dynamic Pruning for Efficient Vision-Language-Action Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

ロボット操作の段階に応じて視覚トークンの冗長性が異なる点に着目し、動作軌跡に基づいてトークン保持率を適応的に調整するプルーニング手法を提案。計算量と遅延を削減しつつ成功率を維持する。

詳しい要約

1. どんなもの?

- Vision-Language-Action (VLA) モデルによるロボットマニピュレーションの推論効率化手法。 - 密な visual token への attention が計算コストの支配要因である点に着目。 - マニピュレーション段階ごとに visual token の冗長性が異なるという観察に基づく。 - 粗い操作段階では冗長性が高く、細かい操作では低い。冗長性は action dynamic と強く相関する。 - これを踏まえた multi-modal pruning framework「Action-aware Dynamic Pruning (ADP)」を提案。

2. 先行研究と比べてどこがすごい?

- 既存手法は VLA モデル内の visual redundancy 削減で推論高速化を図るが、操作段階ごとの冗長性の違いを見落としている。 - 本研究は visual token 冗長性が操作段階(粗い/細かい)で変化し action dynamic と相関することを観察。 - その観察に基づき、段階に応じて token 保持率を適応的に変える点が先行研究と異なる。 - 計算効率と知覚精度を操作段階間でバランスさせる枠組みを提示。

3. 技術・手法の肝は?

- text-driven token selection と action-aware trajectory gating を統合した multi-modal pruning framework。 - gating mechanism が pruning signal を直近の action trajectory に条件付ける。 - 過去の motion window を用いて、ダイナミクスに応じ token retention ratio を適応調整。 - これにより操作段階ごとに計算効率と知覚精度を両立。 - 既存ポリシーへの simple plug-in path を提供する設計。

4. どうやって有効だと検証した?

- LIBERO suites および多様な real-world scenarios で実験。 - ベースライン比で FLOPs と action inference latency を大幅削減。 - 例: OpenVLA-OFT で 1.35× の speed up。 - 例: OpenVLA で 25.8% の改善を達成しつつ、competitive な success rate を維持。 - 効率と性能の両面で有効性を実証したと報告。

5. 議論はある?

- 操作段階ごとの visual token 冗長性の差と action dynamic との相関が設計の根拠。 - 粗い操作では冗長性が高く、細かい操作では低いという観察を前提とする。 - 段階間で計算効率と知覚精度のトレードオフをどう調整するかが論点。 - 具体的な限界や失敗ケース、詳細な議論は要旨からは不明。

6. 次に読むべき論文は?

- OpenVLA-OFT(比較対象の VLA モデル)。 - OpenVLA(比較対象の VLA モデル)。 - LIBERO suites(評価ベンチマーク)。 - VLA モデル内の visual redundancy を削減する既存の効率化手法(個別名は要旨からは不明)。 - text-driven token selection や trajectory gating に関連する pruning/attention 効率化研究(個別名は要旨からは不明)。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xiaohuan Pei, Yuxing Chen, Siyu Xu, Yunke Wang, Yuheng Shi, Chang Xu

分類: cs.RO, cs.AI

原文アブストラクト

Robotic manipulation with Vision-Language-Action models requires efficient inference over long-horizon multi-modal context, where attention to dense visual tokens dominates computational cost. Existing methods optimize inference speed by reducing visual redundancy within VLA models, but they overlook the varying redundancy across robotic manipulation stages. We observe that the visual token redundancy is higher in coarse manipulation phase than in fine-grained operations, and is strongly correlated with the action dynamic. Motivated by this observation, we propose \textbf{A}ction-aware \textbf{D}ynamic \textbf{P}runing (\textbf{ADP}), a multi-modal pruning framework that integrates text-driven token selection with action-aware trajectory gating. Our method introduces a gating mechanism that conditions the pruning signal on recent action trajectories, using past motion windows to adaptively adjust token retention ratios in accordance with dynamics, thereby balancing computational efficiency and perceptual precision across different manipulation stages. Extensive experiments on the LIBERO suites and diverse real-world scenarios demonstrate that our method significantly reduces FLOPs and action inference latency (\textit{e.g.} $1.35 \times$ speed up on OpenVLA-OFT) while maintaining competitive success rates (\textit{e.g.} 25.8\% improvements with OpenVLA) compared to baselines, thereby providing a simple plug-in path to efficient robot policies that advances the efficiency and performance frontier of robotic manipulation. Our project website is: \href{https://vla-adp.github.io/}{ADP.com}.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI