日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

継続学習/VLAarXiv:2606.03598

PHASER: 位相認識と意味的経験再生による視覚言語行動モデルの継続学習

PHASER: Phase-Aware and Semantic Experience Replay for Vision-Language-Action Models

シェア:XThreadsFacebookLINEはてブBluesky

視覚言語行動モデルの継続学習における破滅的忘却を防ぐため、操作軌道の位相(サブスキル)に注目した経験再生手法PHASERを提案。位相ごとのメモリ割り当てと忘却リスクに基づく動的優先付けで、LIBEROベンチマークで最大31%の成功率向上を達成した。

詳しい要約

1. どんなもの?

- Vision-Language-Action (VLA) モデル向けの継続学習フレームワーク PHASER を提案 - 言語条件付きロボット操作で新規スキルを継続獲得する際の catastrophic forgetting を軽減 - experience replay (ER) の課題である phase starvation と履歴タスク間の忘却度の無視に対処 - アーキテクチャ非依存で、3つの VLA backbone に適用可能

2. 先行研究と比べてどこがすごい?

- 従来の naive uniform sampling による ER は操作軌跡の時間的特性と不一致 - 短時間だが因果的に重要な sub-skill を系統的に過少サンプリングし phase starvation を引き起こす - 履歴タスク間の忘却度の違いを完全に無視していた - PHASER は phase 中心の容量配分と干渉ルーティングでこれらを克服 - matched-budget ER 比で Average Success Rate (ASR) を最大31%向上

3. 技術・手法の肝は?

- phase-centric capacity allocation で全 sub-skill に等しいメモリ支援を保証 - multi-modal interference routing strategy で忘却リスクの高い履歴 phase を動的に優先 - Auto-PC を統合: 教師なし action-signal change-point detection と VLM-based semantic verification を組み合わせ - 手動監督なしで temporal boundaries を抽出し、完全自律的な lifelong adaptation を可能に

4. どうやって有効だと検証した?

- 3つの VLA backbone で評価 - LIBERO continual learning suites を使用 - matched-budget ER 比で ASR を最大31%向上 - LIBERO-Goal CL 設定で最終 ASR 87.8% を達成

5. 議論はある?

- 要旨からは不明(限界や議論の詳細は記載なし) - phase starvation と忘却度の無視という ER の課題を指摘 - 完全自律的な lifelong adaptation の実現を主張

6. 次に読むべき論文は?

- experience replay (ER) の関連研究 - Vision-Language-Action (VLA) モデルの継続学習研究 - LIBERO continual learning suites を用いた研究 - Auto-PC に関連する action-signal change-point detection や VLM-based semantic verification の研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ziyang Chen, Shaoguang Wang, Weiyu Guo, Qianyi Cai, He Zhang, Pengteng Li, Yiren Zhao, Yandong Guo

分類: cs.RO, cs.AI, cs.CV

原文アブストラクト

Vision-Language-Action (VLA) models have achieved remarkable success in language-conditioned robotic manipulation. However, deploying these models in open-ended environments requires continuously acquiring novel skills, a process that inevitably triggers severe catastrophic forgetting of previously learned behaviors. While experience replay (ER) serves as a standard mitigating strategy, naive uniform sampling fundamentally misaligns with the temporal characteristics of manipulation trajectories. It systematically under-samples brief but causally critical sub-skills, leading to phase starvation, and completely overlooks the varying degrees of forgetting across historical tasks. To overcome these limitations, we introduce PHASER, an architecture-agnostic continual learning framework. PHASER employs a phase-centric capacity allocation to guarantee equal memory support for all sub-skills, coupled with a multi-modal interference routing strategy that dynamically prioritizes historical phases at high risk of forgetting. Furthermore, to enable fully autonomous lifelong adaptation, we integrate Auto-PC, a lightweight pipeline combining unsupervised action-signal change-point detection with VLM-based semantic verification to extract temporal boundaries without intensive manual supervision. Evaluated across three VLA backbones on LIBERO continual learning suites, PHASER yields substantial empirical improvements, increasing Average Success Rate (ASR) by up to 31% over matched-budget ER and achieving an 87.8% final ASR on the LIBERO-Goal CL setting.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI