日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2511.21542

E0: Tweedie離散拡散によるVLAモデルの汎化性と細粒度制御の向上

E0: Enhancing Generalization and Fine-Grained Control in VLA Models via Tweedie Discrete Diffusion

シェア:XThreadsFacebookLINEはてブBluesky

量子化された行動トークン上でTweedie離散拡散を行うVLAフレームワークE0を提案し、視点摂動拡張と合わせて多様な環境での汎化と細かい制御を実現した。

詳しい要約

1. どんなもの?

- Vision-Language-Action (VLA) モデル向けの新しい action 生成フレームワーク「E0」 - 視覚・言語・制御を統合する VLA の汎化性と細粒度制御の改善を狙う - tweedie discrete diffusion により、量子化された action token 上で反復 denoising を行う - 対象タスクはロボットマニピュレーション - LIBERO, VLABench, ManiSkill, 実機 Franka arm で評価 - 付加手法として spherical viewpoint perturbation augmentation を導入 - 追加データなしでカメラ視点変化への頑健性を高める

2. 先行研究と比べてどこがすごい?

- 既存 VLA は多様なタスク・シーン・カメラ視点への汎化と、粗く不安定な action 生成に課題 - 著者は制約の原因を action の構造的性質に結び付けて議論 - action 分布の multi-peaked 性 - pretrained VLM/VLA backbone の token ベース記号的推論 - 実世界制御が課す実効的な有限解像度 - E0 は masking ベース discrete diffusion の分布不一致を避ける点を主張 - 14 環境で strong baselines を平均 10.7% 上回る state-of-the-art 性能を報告

3. 技術・手法の肝は?

- action 生成を量子化 action token 上の反復 denoising として定式化 - tweedie discrete diffusion を採用 - 離散 action 空間で原理的な diffusion 過程を動作 - token ベース推論との整合 - 細粒度かつ実行可能な action 制御 - masking ベース discrete diffusion の分布不一致を回避 - spherical viewpoint perturbation augmentation - 追加データなしでカメラシフトへの頑健性を強化

4. どうやって有効だと検証した?

- LIBERO, VLABench, ManiSkill, 実機 Franka arm で実験 - 14 の多様な環境で評価 - strong baselines と比較し、平均 10.7% の性能向上を報告 - 詳細な ablation や評価指標は要旨からは不明

5. 議論はある?

- 著者は VLA の汎化・粗い action 問題を action 分布の multi-peaked 性、token ベース推論、有限解像度に結び付けて議論 - 離散 diffusion と token ベース backbone の整合性を主張 - masking ベース discrete diffusion との差異を議論 - 限界・失敗事例・計算コスト・実機での詳細な議論は要旨からは不明

6. 次に読むべき論文は?

- tweedie discrete diffusion の原論文・関連する discrete diffusion 研究 - masking ベース discrete diffusion(比較対象として言及) - pretrained VLM/VLA backbone に関する研究 - LIBERO, VLABench, ManiSkill のベンチマーク論文 - VLA の汎化・action 生成に関する代表的手法(一般名として diffusion policy 系)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhihao Zhan, Jiaying Zhou, Likui Zhang, Qinhan Lv, Hao Liu, Jusheng Zhang, Weizheng Li, Ziliang Chen, Tianshui Chen, Ruifeng Zhai, Keze Wang, Liang Lin, Guangrun Wang

分類: cs.RO, cs.AI, cs.CV, cs.LG

原文アブストラクト

Vision-Language-Action (VLA) models offer a unified framework for robotic manipulation by integrating visual perception, language understanding, and control generation. However, existing VLA systems still struggle to generalize across diverse tasks, scenes, and camera viewpoints, and often produce coarse or unstable actions. We argue that these limitations are closely tied to the structural properties of actions in VLA settings, including the inherent multi-peaked nature of action distributions, the token-based symbolic reasoning of pretrained VLM/VLA backbones, and the effective finite resolution imposed by real-world robotic control. Motivated by these properties, we introduce E0, a tweedie discrete diffusion framework that formulates action generation as iterative denoising over quantized action tokens. By operating in a discrete action space with a principled diffusion process, E0 naturally aligns with token-based reasoning, supports fine-grained yet executable action control, and avoids the distributional mismatch of masking-based discrete diffusion. We further introduce a spherical viewpoint perturbation augmentation to enhance robustness to camera shifts without additional data. Experiments on LIBERO, VLABench, ManiSkill, and a real-world Franka arm demonstrate that E0 achieves state-of-the-art performance across 14 diverse environments, outperforming strong baselines by 10.7% on average.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI