日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

模倣学習arXiv:2604.11351

WM-DAgger:ワールドモデルを用いた模倣学習の効率的なデータ集約手法

WM-DAgger: Enabling Efficient Data Aggregation for Imitation Learning with World Models

シェア:XThreadsFacebookLINEはてブBluesky

模倣学習の複合誤差問題を解決するため、ワールドモデルでOOD回復データを合成し、人間の介入なしにデータ集約を効率化するフレームワークを提案した。

詳しい要約

1. どんなもの?

- 模倣学習の性能を制限する複合誤差問題に対処するため、World Modelsを活用した効率的なデータ集約フレームワークWM-DAggerを提案。 - 人間の継続的な介入を必要とせず、OOD回復データを合成する。 - eye-in-handロボットアームによるマニピュレーションタスクを対象とし、少数のデモンストレーション(few-shot)で学習する。

2. 先行研究と比べてどこがすごい?

- 従来のDAggerフレームワークは人間の継続的な関与に依存し、スケーラビリティが著しく制限されていた。 - WM-DAggerはWorld Modelsを利用して人間の介入なしにOOD回復データを合成し、この制限を克服する。 - 特にfew-shotデモンストレーション設定において、効率的なデータ集約を可能にする点が優れている。

3. 技術・手法の肝は?

- World Modelsを活用してOOD回復データを合成するが、幻覚(hallucination)問題を回避するために2つのメカニズムを導入。 - (1) Corrective Action Synthesis Module:タスク指向の回復行動を生成し、誤解を招く監督を防ぐ。 - (2) Consistency-Guided Filtering Module:合成された終端フレームを専門家デモンストレーションの対応する実フレームに固定することで、物理的に実現不可能な軌道を破棄する。

4. どうやって有効だと検証した?

- 複数の実世界ロボットタスクでWM-DAggerを広範囲に検証。 - 特にsoft bag pushingタスクにおいて、わずか5つのデモンストレーションで93.3%の成功率を達成し、成功率が大幅に向上することを示した。 - ソースコードは公開されている。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- DAgger(Data Aggregation)フレームワーク - World Models - 模倣学習におけるOOD回復データ合成手法

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Anlan Yu, Zaishu Chen, Peili Song, Zhiqing Hong, Haotian Wang, Desheng Zhang, Tian He, Yi Ding, Daqing Zhang

分類: cs.RO

原文アブストラクト

Imitation learning is a powerful paradigm for training robotic policies, yet its performance is limited by compounding errors: minor policy inaccuracies could drive robots into unseen out-of-distribution (OOD) states in the training set, where the policy could generate even bigger errors, leading to eventual failures. While the Data Aggregation (DAgger) framework tries to address this issue, its reliance on continuous human involvement severely limits scalability. In this paper, we propose WM-DAgger, an efficient data aggregation framework that leverages World Models to synthesize OOD recovery data without requiring human involvement. Specifically, we focus on manipulation tasks with an eye-in-hand robotic arm and only few-shot demonstrations. To avoid synthesizing misleading data and overcome the hallucination issues inherent to World Models, our framework introduces two key mechanisms: (1) a Corrective Action Synthesis Module that generates task-oriented recovery actions to prevent misleading supervision, and (2) a Consistency-Guided Filtering Module that discards physically implausible trajectories by anchoring terminal synthesized frames to corresponding real frames in expert demonstrations. We extensively validate WM-DAgger on multiple real-world robotic tasks. Results that our method significantly improves success rates, achieving a 93.3\% success rate in soft bag pushing with only five demonstrations. The source code is publicly available at https://github.com/czs12354-xxdbd/WM-Dagger.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI