日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2509.04535

クロスドメインスキル拡散による文脈内ポリシー適応

In-Context Policy Adaptation via Cross-Domain Skill Diffusion

シェア:XThreadsFacebookLINEはてブBluesky

ドメイン非依存のプロトタイプスキルとドメイン適応スキルを拡散モデルで学習し、モデル更新なし・少量データで強化学習ポリシーを新環境に適応させるフレームワークを提案。

詳しい要約

1. どんなもの?

- 長期ホライズンなマルチタスク環境向けの in-context policy adaptation (ICPAD) フレームワーク - モデル更新なし・target domain データ限定という制約下で、skill-based reinforcement learning 方策を多様な target domain へ迅速に適応させる - cross-domain skill diffusion により domain-agnostic な prototype skills と domain-grounded skill adapter をオフライン dataset から共同学習 - dynamic domain prompting で diffusion-based skill adapter を target domain に整合させる - Metaworld のロボットマニピュレーションと CARLA の自動運転で評価

2. 先行研究と比べてどこがすごい?

- 従来の skill-based RL や方策適応はモデル更新や target domain の十分なデータを前提としがち - 本研究は no model updates かつ limited target domain data という厳しい制約下での適応を狙う点が特徴 - domain-agnostic な prototype skills を lingua franca として異領域を橋渡しする枠組みを提案 - environment dynamics・agent embodiment・task horizon の違いを含む様々な cross-domain 構成に対応 - 具体的な先行研究名や比較数値は要旨からは不明

3. 技術・手法の肝は?

- cross-domain consistent diffusion processes により prototype skills と skill adapter をオフライン dataset から共同学習 - prototype skills は長期ホライズン方策の共通行動表現のプリミティブとして機能 - domain-grounded skill adapter が target domain に接地したスキルを生成 - dynamic domain prompting が adapter を target domain へより良く整合させる - モデル更新なし・限定データで in-context に適応する設計

4. どうやって有効だと検証した?

- Metaworld のロボットマニピュレーションで実験 - CARLA の自動運転で実験 - environment dynamics・agent embodiment・task horizon の違いを含む複数の cross-domain 構成で評価 - limited target domain data 条件下で優れた policy adaptation 性能を示したと報告 - 具体的なベースラインや指標は要旨からは不明

5. 議論はある?

- モデル更新なし・限定 target domain データという制約下での適応性能を主張 - dynamics・embodiment・horizon の差異への頑健性を議論 - 一方で失敗事例や限界、計算コスト、diffusion の推論負荷などの詳細は要旨からは不明 - 比較対象や統計的有意性に関する議論も要旨からは不明

6. 次に読むべき論文は?

- diffusion-based skill learning に関する代表的研究(Diffusion Policy など) - skill-based reinforcement learning の関連研究 - in-context learning / prompt-based adaptation の関連研究 - Metaworld や CARLA を用いた cross-domain transfer 研究 - 要旨で明示的に参照された個別論文は不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Minjong Yoo, Woo Kyung Kim, Honguk Woo

分類: cs.RO, cs.AI, cs.LG

原文アブストラクト

In this work, we present an in-context policy adaptation (ICPAD) framework designed for long-horizon multi-task environments, exploring diffusion-based skill learning techniques in cross-domain settings. The framework enables rapid adaptation of skill-based reinforcement learning policies to diverse target domains, especially under stringent constraints on no model updates and only limited target domain data. Specifically, the framework employs a cross-domain skill diffusion scheme, where domain-agnostic prototype skills and a domain-grounded skill adapter are learned jointly and effectively from an offline dataset through cross-domain consistent diffusion processes. The prototype skills act as primitives for common behavior representations of long-horizon policies, serving as a lingua franca to bridge different domains. Furthermore, to enhance the in-context adaptation performance, we develop a dynamic domain prompting scheme that guides the diffusion-based skill adapter toward better alignment with the target domain. Through experiments with robotic manipulation in Metaworld and autonomous driving in CARLA, we show that our $\oursol$ framework achieves superior policy adaptation performance under limited target domain data conditions for various cross-domain configurations including differences in environment dynamics, agent embodiment, and task horizon.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI