多モーダル潜在リプレイと段階的調整による生涯模倣学習
Lifelong Imitation Learning with Multimodal Latent Replay and Incremental Adjustment
逐次的なタスクで継続的にポリシーを改善する生涯模倣学習フレームワークを提案。視覚・言語・ロボット状態を潜在空間で保存・再利用し、タスク埋め込みの角度マージン制約で適応を安定化。LIBEROベンチマークでSOTAを達成。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Fanqi Yu, Matteo Tiezzi, Tommaso Apicella, Cigdem Beyan, Vittorio Murino
分類: cs.CV, cs.RO
原文アブストラクト
We introduce a lifelong imitation learning framework that enables continual policy refinement across sequential tasks under realistic memory and data constraints. Our approach departs from conventional experience replay by operating entirely in a multimodal latent space, where compact representations of visual, linguistic, and robot's state information are stored and reused to support future learning. To further stabilize adaptation, we introduce an incremental feature adjustment mechanism that regularizes the evolution of task embeddings through an angular margin constraint, preserving inter-task distinctiveness. Our method establishes a new state of the art in the LIBERO benchmarks, achieving 10-17 point gains in AUC and up to 65% less forgetting compared to previous leading methods. Ablation studies confirm the effectiveness of each component, showing consistent gains over alternative strategies. The code is available at: https://github.com/yfqi/lifelong_mlr_ifa.
関連論文
- リプレイ不要の生涯模倣学習のための階層的二重ルーティング注意機構生涯学習/模倣学習
- SPREAD: 生涯模倣学習のための部分空間表現蒸留生涯学習/模倣学習
