日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

模倣学習arXiv:2509.19460

シミュレータ内での自己進化型模倣学習

Self-evolved Imitation Learning in Simulated World

シェア:XThreadsFacebookLINEはてブBluesky

少数のデモンストレーションからシミュレータとの相互作用を通じて徐々に性能を向上させるSEILを提案し、LIBEROベンチマークで少数ショット模倣学習の最先端性能を達成した。

詳しい要約

1. どんなもの?

- 提案手法: Self-Evolved Imitation Learning (SEIL) - 少数の expert demonstrations しかない状況で、simulator との対話を通じて few-shot model を反復的に改善する framework - 対象: 複数タスクにまたがる generalist agent の学習 - 背景課題: 大規模 expert demonstrations の収集は高コスト・労力集約的 - 評価: LIBERO benchmark 上で few-shot imitation learning の SOTA を達成すると主張 - コード公開: https://github.com/Jasper-aaa/SEIL.git

2. 先行研究と比べてどこがすごい?

- 従来の imitation learning は大規模 expert demonstrations を前提とし、収集コストが高い - SEIL は simulator 内でモデル自身が試行し、成功 trajectory を新たな demonstrations として再利用 - 人手による大規模データ収集への依存を軽減 - dual-level augmentation と selector により、生成 demonstrations の多様性と質を確保 - 結果として、はるかに少ない training examples で competitive な性能を狙う - LIBERO benchmark の few-shot imitation learning で新たな SOTA を主張

3. 技術・手法の肝は?

- 核となる枠組み: simulator 内でモデルがタスクを試行し、成功 trajectory を新規 demonstrations として収集、反復的に refinement - dual-level augmentation - Model-level: Exponential Moving Average (EMA) model を primary model と協調させる - Environment-level: 初期 object 位置に小さな変動を導入 - lightweight selector - 生成された trajectory pool から complementary かつ informative な軌跡を選別し、demonstration の質を担保 - これらの curated samples により、少ない training examples で学習を進める

4. どうやって有効だと検証した?

- LIBERO benchmark 上で実験 - few-shot imitation learning シナリオにおいて新たな state-of-the-art 性能を達成したと報告 - 具体的な比較手法・指標・ablation の詳細は要旨からは不明

5. 議論はある?

- 要旨からは不明 - 限界、失敗事例、sim-to-real への一般化、selector の計算コストなどの議論は要旨に明記されていない - 主張として、curated samples により far fewer training examples で competitive 性能が得られると述べるにとどまる

6. 次に読むべき論文は?

- 要旨で直接参照・比較されている個別研究は明示されていない - 関連手法として次を検討 - 本手法の基盤となる imitation learning / behavior cloning - EMA を用いた teacher-student 型の手法 - demonstration augmentation や data selection に関する研究 - LIBERO benchmark を用いた few-shot / generalist agent 研究 - 具体的な論文名は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yifan Ye, Jun Cen, Jing Chen, Zhihe Lu

分類: cs.RO, cs.AI, cs.LG

原文アブストラクト

Imitation learning has been a trend recently, yet training a generalist agent across multiple tasks still requires large-scale expert demonstrations, which are costly and labor-intensive to collect. To address the challenge of limited supervision, we propose Self-Evolved Imitation Learning (SEIL), a framework that progressively improves a few-shot model through simulator interactions. The model first attempts tasksin the simulator, from which successful trajectories are collected as new demonstrations for iterative refinement. To enhance the diversity of these demonstrations, SEIL employs dual-level augmentation: (i) Model-level, using an Exponential Moving Average (EMA) model to collaborate with the primary model, and (ii) Environment-level, introducing slight variations in initial object positions. We further introduce a lightweight selector that filters complementary and informative trajectories from the generated pool to ensure demonstration quality. These curated samples enable the model to achieve competitive performance with far fewer training examples. Extensive experiments on the LIBERO benchmark show that SEIL achieves a new state-of-the-art performance in few-shot imitation learning scenarios. Code is available at https://github.com/Jasper-aaa/SEIL.git.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI