日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLA/ロボット操作arXiv:2607.15714

AC-VLA: 構成学習によるロバストな分布外行動実行

AC-VLA: Robust Out-of-Distribution Action Execution via Compositional Learning

シェア:XThreadsFacebookLINEはてブBluesky

VLAモデルの分布外汎化を改善するため、LLMによるタスク分解と非対称マスキングを組み合わせた構成学習フレームワークAC-VLAを提案した。

詳しい要約

1. どんなもの?

VLAモデルのOOD汎化を改善するAction Compositional学習フレームワークAC-VLAを提案。 - 対象: Vision-Language-Action (VLA) モデルによるロボット操作 - 課題: 既知sub-taskの未見組合せでのOOD汎化失敗 - 失敗モード: trajectory overfittingとperceptual shortcut - 構成: 2つのarchitecture-agnosticコンポーネント - 実装: π_{0.5}上に構築しLIBERO/LIBERO-OODで評価

2. 先行研究と比べてどこがすごい?

既存VLAはend-to-end操作に優れるがOOD組合せに弱い。 - 従来: 全体trajectoryパターンへの過適合 - 従来: wrist-viewテクスチャへのaction token依存 - 提案: 上記2失敗モードを同時に対処 - 特徴: architectural modification-freeで任意VLA backboneに統合可能 - 結果: compositional OODで約28%絶対改善、in-distributionはほぼ完璧維持

3. 技術・手法の肝は?

2つのarchitecture-agnosticコンポーネントから成る。 - (i) compositional learning module - LLM-driven instruction decomposer - proprioceptive trajectory aligner - dense sub-task supervisionを生成 - 完全デモと分解データのmixed training - (ii) state-conditioned asymmetric masking - closed-gripper相でwrist-view入力を抑制 - global semantic groundingを強制 - すべてarchitecture変更不要

4. どうやって有効だと検証した?

π_{0.5}に実装しベンチマークで評価。 - データセット: LIBEROおよびLIBERO-OOD - 結果: compositional OODタスクで約28%の絶対改善 - 結果: in-distribution性能はほぼ完璧を維持 - 詳細な実験設定・比較手法は要旨からは不明

5. 議論はある?

要旨からは不明。 - 限界・失敗事例の議論は記載なし - maskingの一般性や他backboneでの検証は不明 - 計算コストやLLM依存性の議論は不明

6. 次に読むべき論文は?

要旨で参照/比較されている研究や関連手法を挙げる。 - π_{0.5} (ベースVLA) - LIBERO - LIBERO-OOD - Vision-Language-Action (VLA) モデル全般 - LLM-driven instruction decomposition - その他具体的な関連論文は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xiaojiang Peng, Kai Peng, Jie Lu, Zheng Lian, Zitong YU, Xiaobo Wang

分類: cs.RO

原文アブストラクト

Vision-Language-Action (VLA) models excel at end-to-end robotic manipulation but struggle with out-of-distribution (OOD) generalization when familiar sub-tasks are recombined in unseen configurations. We identify two mutually reinforcing failure modes: \emph{trajectory overfitting}, where models overfit to holistic trajectory patterns rather than compositional sub-skill semantics; and \emph{perceptual shortcut}, where action tokens over-rely on wrist-view textures at the expense of global spatial grounding. To address both, we introduce \textbf{AC-VLA}, a plug-and-play Action Compositional learning framework comprising two architecture-agnostic components: \textbf{(i)} a compositional learning module that uses an LLM-driven instruction decomposer and a proprioceptive trajectory aligner to generate dense sub-task supervision, followed by mixed training on complete demonstrations and decomposed data to endow the model with compositional generalization; and \textbf{(ii)} a state-conditioned asymmetric masking strategy that suppresses wrist-view inputs during closed-gripper phases, enforcing global semantic grounding. All components are architectural modification-free and directly integrable into any VLA backbone. Instantiated on $\pi_{0.5}$ and evaluated on LIBERO and LIBERO-OOD benchmarks, AC-VLA achieves a ~28% absolute improvement on compositional OOD tasks while maintaining near-perfect in-distribution performance.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI