日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

模倣学習arXiv:2606.09381

ReGIL: 単一デモンストレーションからの検索誘導型模倣学習

ReGIL: Retrieval-Guided Imitation Learning from a Single Demonstration

シェア:XThreadsFacebookLINEはてブBluesky

単一のデモンストレーションを外部メモリとして扱い、訓練中に繰り返し検索して探索の誘導、正則化バッファの生成、報酬の構築を行うことで、ロボット操作ポリシーを効率的に学習するフレームワークを提案した。

詳しい要約

1. どんなもの?

- 単一のdemonstrationからロボットmanipulation policyを学習する手法ReGILを提案。 - 単一demonstrationをexternal memoryとして扱い、学習中に繰り返しqueryするretrieval-guided imitation learning。 - 探索誘導、regularization buffer生成、reward構築を同時に行う。 - LIBEROとMeta-Worldのbenchmarkで評価し、real-robotでも検証。

2. 先行研究と比べてどこがすごい?

- 単一demonstration設定において、従来baselineよりsuccess rateとtraining efficiencyで優位。 - 単一demonstrationを静的なsupervisionとしてだけでなく、再利用可能なmemoryとして活用する点が新しい。 - 従来は軌道の小さなずれがfailureに繋がりやすく、online interaction data収集が高コストだった。

3. 技術・手法の肝は?

- 単一demonstrationをexternal memoryとして保持し、学習中に繰り返しretrieveする。 - 現在のtrajectoryとretrieved segmentのlocal temporal alignmentによりrewardを計算。 - このrewardはstep-wiseでinformativeなfeedbackを提供。 - 同時にexploration guideとregularization buffer生成も行う。

4. どうやって有効だと検証した?

- LIBEROとMeta-Worldのrobotic manipulation tasksでsingle demonstration設定で評価。 - success rateとtraining efficiencyでprior baselinesを上回る。 - real-robot experimentsで1 demonstrationと1時間未満のonline trainingにより、3つのmanipulation tasksで75%以上のsuccess rateを達成。 - 初期robot poseとtarget positionにrandomnessがある設定で検証。

5. 議論はある?

- 単一demonstrationをreusable memoryとして活用することが、静的なsupervision以上の効果をもたらすと主張。 - 限界や失敗事例、一般的なタスクへの適用可能性については要旨からは不明。 - real-robotでのrandomnessの範囲や詳細な条件は要旨からは不明。

6. 次に読むべき論文は?

- LIBERO benchmark - Meta-World benchmark - imitation learning from demonstration - retrieval-based imitation learning - reinforcement learning with demonstration

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yuying Zhang, Francesco Verdoja, Wenyan Yang, Ville Kyrki

分類: cs.RO

原文アブストラクト

Learning robot manipulation policies with deep neural networks from a single demonstration remains highly challenging, as even small deviations from the demonstrated trajectory can quickly compound into failure, while collecting substantial online interaction data is costly. We propose ReGIL, a retrieval-guided imitation learning framework that treats a single demonstration as an external memory. ReGIL repeatedly queries this static memory throughout training to simultaneously guide exploration, generate the regularization buffer, and construct rewards. Specifically, it computes rewards through local temporal alignment between the current trajectory and the retrieved segment, providing step-wise and informative feedback for policy improvement. We evaluate ReGIL on robotic manipulation tasks from the LIBERO and Meta-World benchmarks under the single demonstration setting. ReGIL outperforms prior baselines in both success rate and training efficiency. In real-robot experiments, using only one demonstration and less than one hour of online training, ReGIL achieves over 75% success rate across three manipulation tasks with randomness in both initial robot pose and target position. These results demonstrate that leveraging the single demonstration as reusable memory can provide more than static supervision for efficient robot learning. More details can be found on our website: https://regil2026.github.io/

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI