日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

模倣学習arXiv:2606.21672

異種デモンストレーションからの模倣学習:接地された潜在アクション世界モデルを用いて

Imitation from Heterogeneous Demonstrations using Grounded Latent-Action World Models

シェア:XThreadsFacebookLINEはてブBluesky

異なるアクション空間やラベル欠如を含む異種データソースから、予測に基づく共通の潜在アクション表現を学習し、行動クローニングポリシーを訓練する手法を提案。シミュレーションと実世界の操作タスクで有効性を実証。

詳しい要約

1. どんなもの?

- 異種デモンストレーションからの模倣学習を可能にする手法 GLAM を提案。 - アクション空間が異なり、アクションラベルが無いデータ源も含む heterogeneous なデータを活用。 - 共有 latent action space を持つ generative models のペアで構成。 - 下流の behavioural cloning (BC) ポリシーを訓練し、観測から latent action を予測、robot action にデコード。 - シミュレーションと実世界の5つの manipulation タスクで評価。

2. 先行研究と比べてどこがすごい?

- 既存の co-training は heuristic で hand-engineered な alignment 技術に依存。 - GLAM は「同じ環境効果を生む action は同じ表現を持つべき」という prediction に基づく grounding の原則を採用。 - 異種データ源間で action transfer を可能にする aligned latent action space を学習。 - 同じ data-scarce 設定で BC ベースラインや prior latent-action 手法を大幅に上回り、平均 +48% のタスク成功率改善。

3. 技術・手法の肝は?

- grounded latent-action world model (GLAM) を提案。 - データ源間で共有される latent action space を持つ generative models のペア。 - 未来の観測をデータ源間で一貫して予測することで latent action space を grounding。 - この latent action space を用いて BC ポリシーを訓練。 - ポリシーは観測を latent action にマップし、robot action にデコード。

4. どうやって有効だと検証した?

- シミュレーションと実世界の5つの manipulation タスクで評価。 - アクションラベルの有無に関わらず、データ源間の action transfer を実現。 - 同じ data-scarce 設定で BC ベースラインおよび prior latent-action 手法と比較。 - 平均 +48% のタスク成功率改善を達成。 - ビデオとコードは https://viccccciv.github.io/glam/ で公開。

5. 議論はある?

- 要旨からは不明。 - 限界や失敗事例、計算コスト、スケーラビリティに関する議論は要旨に記載なし。

6. 次に読むべき論文は?

- 要旨で参照/比較されている prior latent-action 手法や co-training アプローチ。 - 具体的な論文名は要旨に記載なし。 - 同分野の定番として behavioural cloning (BC)、imitation learning、world models 関連の研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Tianyou Wang, Anson Lei, Joe Watson, Ingmar Posner

分類: cs.RO, cs.AI, cs.LG

原文アブストラクト

Imitation learning has emerged as a powerful paradigm for learning visuomotor policies, but its generalisation and stability are limited by the scale and quality of demonstration data needed. A promising direction is to leverage more abundant but heterogeneous data sources, which differ in action space and often lack action labels altogether. Existing co-training approaches that combine heterogeneous data sources rely on heuristic and hand-engineered alignment techniques. In contrast, we argue that action representations should be grounded in prediction: actions that produce the same effect on the environment should share the same representation, regardless of their sources. To this end, we instantiate this principle by using a grounded latent-action world model (GLAM), a pair of generative models with a shared latent action space across data sources that is grounded by predicting future observations consistently across sources. This latent action space is used to train downstream behavioural cloning (BC) policies which map observations to latent actions and decode them back to robot actions, providing a paradigm for learning from heterogeneous data. Empirically, we demonstrate that GLAM successfully learns an aligned latent action space that facilitates action transfer across data sources with and without action labels. Across five manipulation tasks in simulation and in the real world, GLAM-aligned policies significantly outperform BC baselines and prior latent-action methods, achieving an average of +48% improvement in task success rate with the same data-scarce setting. Videos and code are available at https://viccccciv.github.io/glam/.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI