日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2504.15517

少数ショット視覚言語行動インクリメンタル方策学習

Few-Shot Vision-Language Action-Incremental Policy Learning

シェア:XThreadsFacebookLINEはてブBluesky

少数の実演から新しい操作タスクを継続的に学習するため、タスク固有プロンプトとタスク関係グラフによる進化戦略を組み合わせたTOPICを提案した論文。

詳しい要約

1. どんなもの?

- Transformer ベースのロボット操作手法を対象に、少数のデモンストレーションで新規タスクを継続学習する問題を Few-Shot Action-Incremental Learning (FSAIL) として定式化 - これを解くために Task-prOmpt graPh evolutIon poliCy (TOPIC) を設計 - 多視点空間表現と言語指示を用いる既存手法の枠組みを前提に、few-shot での新タスク獲得と継続学習を狙う - ロボット操作タスクにおける few-shot continual learning の先駆的な取り組みと位置づけ

2. 先行研究と比べてどこがすごい?

- 既存の Transformer ベース手法は多数の robot demonstrations を必要とし、データ収集が極めて困難という課題があった - 既存手法は少数デモのみでの新タスクへの継続学習能力を欠いていた - TOPIC は few-shot デモからタスク固有の識別情報を抽出し、新タスクへの継続学習と catastrophic forgetting の緩和を両立 - 実験で state-of-the-art baselines を success rate で 26% 以上上回ると報告

3. 技術・手法の肝は?

- Task-Specific Prompts (TSP): few-shot demonstrations 内のマルチモーダル情報の深い相互作用を通じて学習し、タスク固有の識別情報を効果的に抽出 - Continuous Evolution Strategy (CES): タスク間の内在的関係を利用して task relation graph を構築 - CES により過去タスクで学習したスキルを再利用し、新タスクへの適応を促進 - catastrophic forgetting の緩和と継続学習能力の向上を狙う構成

4. どうやって有効だと検証した?

- extensive experimental results により TOPIC の有効性を検証したと記載 - state-of-the-art baselines と比較し、success rate で 26% 以上上回る性能を示した - 既存 Transformer-based policies の継続学習能力を大幅に改善したと報告 - 具体的なタスク設定・データセット・実験規模は要旨からは不明

5. 議論はある?

- few-shot デモと継続学習を組み合わせる際の catastrophic forgetting が主要な議論点として設定されている - タスク間の関係を graph で捉え、スキル再利用で新タスク適応を図る設計の妥当性が論点 - 具体的な限界・失敗事例・計算コスト・graph 構築の詳細な議論は要旨からは不明

6. 次に読むべき論文は?

- 要旨で比較対象として明示された個別研究名はないため、同分野の定番として Transformer-based robotic manipulation、multi-view spatial representations、language instructions を用いる模倣学習手法 - 関連概念として Task-Specific Prompts、task relation graph、catastrophic forgetting 対策の continual learning 手法 - few-shot imitation learning および action-incremental learning の関連研究を次に読む候補として挙げる

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Mingchen Song, Xiang Deng, Guoqiang Zhong, Qi Lv, Jia Wan, Yinchuan Li, Jianye Hao, Weili Guan

分類: cs.RO, cs.LG

原文アブストラクト

Recently, Transformer-based robotic manipulation methods utilize multi-view spatial representations and language instructions to learn robot motion trajectories by leveraging numerous robot demonstrations. However, the collection of robot data is extremely challenging, and existing methods lack the capability for continuous learning on new tasks with only a few demonstrations. In this paper, we formulate these challenges as the Few-Shot Action-Incremental Learning (FSAIL) task, and accordingly design a Task-prOmpt graPh evolutIon poliCy (TOPIC) to address these issues. Specifically, to address the data scarcity issue in robotic imitation learning, TOPIC learns Task-Specific Prompts (TSP) through the deep interaction of multi-modal information within few-shot demonstrations, thereby effectively extracting the task-specific discriminative information. On the other hand, to enhance the capability for continual learning on new tasks and mitigate the issue of catastrophic forgetting, TOPIC adopts a Continuous Evolution Strategy (CES). CES leverages the intrinsic relationships between tasks to construct a task relation graph, which effectively facilitates the adaptation of new tasks by reusing skills learned from previous tasks. TOPIC pioneers few-shot continual learning in the robotic manipulation task, and extensive experimental results demonstrate that TOPIC outperforms state-of-the-art baselines by over 26$\%$ in success rate, significantly enhancing the continual learning capabilities of existing Transformer-based policies.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI