日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2602.20200

グローバル事前分布と局所一貫性を活用したデュアルメモリ拡張VLAモデルによる効率的なロボットマニピュレーション

Global Prior Meets Local Consistency: Dual-Memory Augmented Vision-Language-Action Model for Efficient Robotic Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

タスクレベルの事前分布メモリと実行履歴の一貫性メモリを組み合わせ、拡散ベースのVLAモデルの推論効率と時間的一貫性を改善した手法OptimusVLAを提案。複数のシミュレーションベンチマークで成功率を大幅に向上させた。

詳しい要約

1. どんなもの?

- Hierarchical Vision-Language-Action (VLA) モデルの性能は action generation がボトルネック。 - 推論効率が低い: isotropic noise prior と target action distribution の分布ギャップが大きく、denoising steps と infeasible samples が増える。 - 頑健性が低い: 現在の observation のみに条件付けし、history sequence を無視するため task progress や temporal consistency を欠く。 - これを解決する dual-memory VLA framework「OptimusVLA」を提案。 - Global Prior Memory (GPM) と Local Consistency Memory (LCM) から成る。

2. 先行研究と比べてどこがすごい?

- 従来の hierarchical VLA は action generation の効率と頑健性に課題。 - OptimusVLA は GPM で Gaussian noise を task-level prior に置換し、生成経路を短縮し NFE を削減。 - LCM で executed action sequence を動的にモデル化し、task progress を推定、temporal coherence と smoothness を強制する consistency constraint を注入。 - 3つの simulation benchmark で strong baselines を一貫して上回る。 - LIBERO で平均成功率 98.6%。 - CALVIN で pi_0 を 13.5% 上回る。 - RoboTwin 2.0 Hard で平均成功率 38%。 - Real-World 評価で Generalization と Long-horizon suite で最高、pi_0 をそれぞれ 42.9%、52.4% 上回り、2.9x の推論高速…

3. 技術・手法の肝は?

- Dual-memory 構成。 - Global Prior Memory (GPM): 意味的に類似した trajectory から取得した task-level prior で Gaussian noise を置換。 - 生成経路を短縮し、function evaluations (NFE) を削減。 - Local Consistency Memory (LCM): 実行済み action sequence を動的にモデル化。 - task progress を推定。 - 学習された consistency constraint を注入し、trajectory の temporal coherence と smoothness を強制。

4. どうやって有効だと検証した?

- 3つの simulation benchmark で評価。 - LIBERO: 平均成功率 98.6%。 - CALVIN: pi_0 を 13.5% 上回る。 - RoboTwin 2.0 Hard: 平均成功率 38%。 - Real-World 評価。 - Generalization suite で pi_0 を 42.9% 上回る。 - Long-horizon suite で pi_0 を 52.4% 上回る。 - 2.9x の推論高速化を実現。

5. 議論はある?

- 要旨からは不明。 - 限界、失敗事例、計算コスト、メモリのスケーラビリティ、実世界での安全性などは記述されていない。

6. 次に読むべき論文は?

- pi_0 (比較対象の strong baseline)。 - Hierarchical Vision-Language-Action (VLA) モデル全般。 - LIBERO、CALVIN、RoboTwin 2.0 の benchmark 関連研究。 - Diffusion policy や action generation における prior 設計・consistency 制約の研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zaijing Li, Bing Hu, Rui Shao, Gongwei Chen, Dongmei Jiang, Pengwei Xie, Jianye Hao, Liqiang Nie

分類: cs.RO, cs.AI, cs.CV

原文アブストラクト

Hierarchical Vision-Language-Action (VLA) models have rapidly become a dominant paradigm for robotic manipulation. It typically comprising a Vision-Language backbone for perception and understanding, together with a generative policy for action generation. However, its performance is increasingly bottlenecked by the action generation proceess. (i) Low inference efficiency. A pronounced distributional gap between isotropic noise priors and target action distributions, which increases denoising steps and the incidence of infeasible samples. (ii) Poor robustness. Existing policies condition solely on the current observation, neglecting the constraint of history sequence and thus lacking awareness of task progress and temporal consistency. To address these issues, we introduce OptimusVLA, a dual-memory VLA framework with Global Prior Memory (GPM) and Local Consistency Memory (LCM). GPM replaces Gaussian noise with task-level priors retrieved from semantically similar trajectories, thereby shortening the generative path and reducing the umber of function evaluations (NFE). LCM dynamically models executed action sequence to infer task progress and injects a learned consistency constraint that enforces temporal coherence and smoothness of trajectory. Across three simulation benchmarks, OptimusVLA consistently outperforms strong baselines: it achieves 98.6% average success rate on LIBERO, improves over pi_0 by 13.5% on CALVIN, and attains 38% average success rate on RoboTwin 2.0 Hard. In Real-World evaluation, OptimusVLA ranks best on Generalization and Long-horizon suites, surpassing pi_0 by 42.9% and 52.4%, respectively, while delivering 2.9x inference speedup.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI