日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

模倣学習arXiv:2511.10110

一日で千のタスクを学習する

Learning a Thousand Tasks in a Day

シェア:XThreadsFacebookLINEはてブBluesky

ロボットマニピュレーションの模倣学習において、軌道を整列と相互作用の段階に分解し、検索ベースの一般化を組み合わせることで、タスクあたり1回のデモンストレーションから学習し、24時間以内に1000の日常タスクを教示できる手法MT3を開発した。

詳しい要約

1. どんなもの?

- ロボットマニピュレーションの模倣学習におけるデータ効率改善を目的とした研究 - 操作軌道を『alignment phase』と『interaction phase』に分解する事前分布と、retrieval ベースの汎化を検討 - 3,450 回の実世界 rollout で分解の設計選択を体系的に調査 - 知見を統合した手法 Multi-Task Trajectory Transfer (MT3) を提案 - MT3 は 1 タスクあたり 1 デモから日常操作タスクを学習し、新規物体インスタンスにも汎化 - 24 時間未満の人間デモ時間で 1,000 タスクを教示

2. 先行研究と比べてどこがすごい?

- 従来の模倣学習は 1 タスクに数百〜数千デモを要することが多い - 支配的パラダイムである単一フェーズの monolithi policy による behavioural cloning と比較 - 1 タスクあたり 10 デモ未満の few-demonstrations-per-task 設定で、分解によりデータ効率が桁違いに改善 - retrieval は alignment・interaction の両フェーズで behavioural cloning を一貫して上回る - 単一デモからの学習と新規物体への汎化を両立し、1,000 タスクを 24 時間未満で教示可能にした点が特長

3. 技術・手法の肝は?

- 操作軌道を sequential な alignment phase と interaction phase に分解する事前分布を導入 - 各フェーズの設計選択(手法・表現など)を比較検討 - retrieval ベースの汎化を alignment・interaction の両方に適用 - これらの知見に基づく模倣学習手法 MT3 (Multi-Task Trajectory Transfer) を構築 - MT3 は 1 デモから日常操作タスクを学習し、新規物体インスタンスへ汎化 - 詳細なアーキテクチャや実装は要旨からは不明

4. どうやって有効だと検証した?

- 3,450 回の実世界 rollout で分解の設計選択を体系的に比較 - few-demonstrations-per-task 設定(<10 デモ)で単一フェーズ学習とのデータ効率を比較 - alignment・interaction 各フェーズで retrieval と behavioural cloning を比較 - MT3 について 2,200 回の追加実世界 rollout を実施 - 異なるタスクファミリーにわたり MT3 の能力と限界を分析 - 1,000 タスクを 24 時間未満の人間デモ時間で教示できることを実証

5. 議論はある?

- 分解と retrieval の有効性を実世界 rollout で示す一方、MT3 の限界もタスクファミリー別に分析 - 1,000 タスク教示の効率性を報告 - 具体的な限界の内容や失敗要因、議論の詳細は要旨からは不明 - 実験動画は https://www.robot-learning.uk/learning-1000-tasks で公開

6. 次に読むべき論文は?

- behavioural cloning(単一フェーズ monolithi policy)との比較が中心 - retrieval ベース手法、imitation learning の関連研究 - alignment phase / interaction phase の分解に関する先行研究 - 具体的な参照論文名は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kamil Dreczkowski, Pietro Vitiello, Vitalis Vosylius, Edward Johns

分類: cs.RO

原文アブストラクト

Humans are remarkably efficient at learning tasks from demonstrations, but today's imitation learning methods for robot manipulation often require hundreds or thousands of demonstrations per task. We investigate two fundamental priors for improving learning efficiency: decomposing manipulation trajectories into sequential alignment and interaction phases, and retrieval-based generalisation. Through 3,450 real-world rollouts, we systematically study this decomposition. We compare different design choices for the alignment and interaction phases, and examine generalisation and scaling trends relative to today's dominant paradigm of behavioural cloning with a single-phase monolithic policy. In the few-demonstrations-per-task regime (<10 demonstrations), decomposition achieves an order of magnitude improvement in data efficiency over single-phase learning, with retrieval consistently outperforming behavioural cloning for both alignment and interaction. Building on these insights, we develop Multi-Task Trajectory Transfer (MT3), an imitation learning method based on decomposition and retrieval. MT3 learns everyday manipulation tasks from as little as a single demonstration each, whilst also generalising to novel object instances. This efficiency enables us to teach a robot 1,000 distinct everyday tasks in under 24 hours of human demonstrator time. Through 2,200 additional real-world rollouts, we reveal MT3's capabilities and limitations across different task families. Videos of our experiments can be found on at https://www.robot-learning.uk/learning-1000-tasks.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI