日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

模倣学習arXiv:2601.12397

専門家混合による多様なスキル学習で行動モデルを強化

Learning Diverse Skills for Behavior Models with Mixture of Experts

シェア:XThreadsFacebookLINEはてブBluesky

模倣学習におけるマルチタスク干渉問題を解決するため、専門家混合(MoE)を用いて各専門家を観測空間の部分領域に特化させ、多様なスキルを学習する手法Di-BMを提案。実世界のロボット操作タスクで性能を大幅に向上させた。

詳しい要約

1. どんなもの?

- 提案手法: Di-BM (Mixture of Experts を用いた Behavior Model) - 目的: 模倣学習におけるマルチタスク設定での性能劣化を改善 - 特徴: 各 expert が異なる観測分布を学習し、観測空間の部分領域に特化 - 手法: energy-based models で expert 固有の観測分布を表現し、対応する action model と同時に学習 - 利点: plug-and-play で既存の模倣学習手法に統合可能 - 検証: 複数の実世界ロボット操作タスクで SOTA を上回る性能を確認

2. 先行研究と比べてどこがすごい?

- 従来の模倣学習モデルは単一タスクでは高い性能を示すが、マルチタスクではタスク間干渉により平均化効果が生じ性能が低下 - Di-BM は Mixture of Experts を導入し、各 expert が観測空間の部分領域に特化することで干渉を軽減 - 実験により、複数の実世界ロボット操作タスクで state-of-the-art ベースラインを大幅に上回ることを示した - さらに、新規タスクへの fine-tuning でデータ効率と expert 知識の再利用性が向上

3. 技術・手法の肝は?

- Mixture of Experts アーキテクチャを採用 - 各 expert に異なる観測分布を関連付け、観測空間の部分領域に特化させる - energy-based models を用いて expert 固有の観測分布を表現 - expert 固有の観測分布と対応する action model を同時に学習 - plug-and-play 設計で標準的な模倣学習手法にシームレスに統合可能

4. どうやって有効だと検証した?

- 複数の実世界ロボット操作タスクで実験を実施 - Di-BM が state-of-the-art ベースラインを大幅に上回ることを確認 - 事前学習した Di-BM を新規タスクに fine-tuning し、データ効率と expert 学習知識の再利用性が優れていることを示した - コードは https://github.com/robotnav-bot/Di-BM で公開

5. 議論はある?

- 要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究: 明示的な論文名はなし - 関連手法: 模倣学習 (imitation learning)、Mixture of Experts、energy-based models - 同分野の定番: Behavior Cloning、DAgger、GAIL など

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Wangtian Shen, Jinming Ma, Mingliang Zhou, Ziyang Meng

分類: cs.RO

原文アブストラクト

Imitation learning has demonstrated strong performance in robotic manipulation by learning from large-scale human demonstrations. While existing models excel at single-task learning, it is observed in practical applications that their performance degrades in the multi-task setting, where interference across tasks leads to an averaging effect. To address this issue, we propose to learn diverse skills for behavior models with Mixture of Experts, referred to as Di-BM. Di-BM associates each expert with a distinct observation distribution, enabling experts to specialize in sub-regions of the observation space. Specifically, we employ energy-based models to represent expert-specific observation distributions and jointly train them alongside the corresponding action models. Our approach is plug-and-play and can be seamlessly integrated into standard imitation learning methods. Extensive experiments on multiple real-world robotic manipulation tasks demonstrate that Di-BM significantly outperforms state-of-the-art baselines. Moreover, fine-tuning the pretrained Di-BM on novel tasks exhibits superior data efficiency and the reusable of expert-learned knowledge. Code is available at https://github.com/robotnav-bot/Di-BM.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI