日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

継続学習/模倣学習arXiv:2606.27374

ワールドアクションモデルによる再帰的生成リプレイを用いた継続的模倣学習

World Action Models Enable Continual Imitation Learning with Recurrent Generative Replays

シェア:XThreadsFacebookLINEはてブBluesky

ロボットの行動予測に加えて未来の視覚観測も生成できるワールドアクションモデルを用いて、過去のタスクの疑似軌道を合成し、元のデモデータを保存せずに継続学習を行うフレームワークを提案した。実験では忘却を最大50%削減し、実データを使う手法に匹敵する性能を示した。

詳しい要約

1. どんなもの?

- World Action Models (WAMs) を基盤に、継続的模倣学習フレームワーク Recurrent Generative Replay (REGEN) を提案。 - WAM はロボット行動予測に加え将来の視覚観測を生成可能。 - REGEN は擬似リプレイ軌道を合成し、元の人間デモンストレーションを保存せずに過去タスクを復習。 - 継続適応中、REGEN は WAM を再帰的にクエリし、事前タスク指示と現タスク観測のみを条件に擬似リプレイ軌道を生成。 - シミュレーションと実世界操作で評価。

2. 先行研究と比べてどこがすごい?

- 逐次ファインチューニングと比較し、破滅的忘却を最大50%削減。 - 実リプレイデータへのアクセスを必要とする privileged experience replay 手法の性能に迫る。 - 元の人間デモンストレーションを保存せずにリプレイを実現する点が新しい。 - WAM を継続的ロボット学習の基盤として確立する可能性を示す。

3. 技術・手法の肝は?

- World Action Models (WAMs) の生成能力を活用。 - Recurrent Generative Replay (REGEN) は擬似リプレイ軌道を合成。 - 継続適応中、WAM を再帰的にクエリし、事前タスク指示と現タスク観測のみを条件に擬似リプレイ軌道を生成。 - これにより、ロボットポリシーが過去タスクを復習可能。

4. どうやって有効だと検証した?

- シミュレーションと実世界操作設定で実験。 - 逐次ファインチューニングと比較し、破滅的忘却を最大50%削減。 - privileged experience replay 手法の性能に迫ることを確認。 - 生成リプレイを制限する要因を分析し、長期的視覚劣化と行動-観測の不一致を主要ボトルネックとして特定。

5. 議論はある?

- 生成リプレイの限界要因として、長期的視覚劣化と行動-観測の不一致を特定。 - これらが主要ボトルネックであると分析。 - その他の議論や制限については要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究: sequential fine-tuning, privileged experience replay。 - 関連手法: World Action Models (WAMs), Recurrent Generative Replay (REGEN)。 - 同分野の定番: continual imitation learning, catastrophic forgetting。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Manish Kumar Govind, Dominick Reilly, Smit Patel, Hieu Le, Srijan Das

分類: cs.RO, cs.CV

原文アブストラクト

Going beyond predicting robot actions, World Action Models (WAMs) can also generate future visual observations. We build on this generative capability to propose Recurrent Generative Replay (REGEN), a continual imitation learning framework that synthesizes pseudo-replay trajectories, enabling a robot policy to rehearse previously learned tasks without storing their original human demonstrations. During continual adaptation, REGEN recursively queries the WAM to synthesize pseudo-replay trajectories conditioned only on prior task instructions and current-task observations. Experiments in both simulation and real-world manipulation settings show that REGEN reduces catastrophic forgetting by up to $50\%$ relative to sequential fine-tuning, while approaching the performance of privileged experience replay methods that require access to real replay data. Finally, we analyze the factors limiting generated replay, identifying long-horizon visual degradation and action-observation inconsistency as the primary bottlenecks. Our results establish WAMs as a promising foundation for continual robot learning without stored demonstrations.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI