日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

模倣学習arXiv:2506.20668

DemoDiffusion:事前学習済み拡散ポリシーを用いた一回の人間模倣

DemoDiffusion: One-Shot Human Imitation using pre-trained Diffusion Policy

シェア:XThreadsFacebookLINEはてブBluesky

人間の実演を一回だけ模倣してロボットに操作タスクを実行させる手法。運動学的リターゲティングで得た粗い軌道を、事前学習済みの汎用拡散ポリシーで修正することで、タスク固有の訓練や人間-ロボットのペアデータなしに新しいタスクやシーンに適応できる。

詳しい要約

1. どんなもの?

- ロボットが人間の単一デモンストレーションを模倣して manipulation タスクを実行する手法 DemoDiffusion の提案。 - タスク固有の学習や paired human-robot data を必要としない one-shot 手法。 - 人間の手の動きを kinematic retargeting でロボットの end-effector 軌道に変換し、pre-trained generalist diffusion policy で修正する。

2. 先行研究と比べてどこがすごい?

- online reinforcement learning や paired human-robot data を用いる手法と異なり、新規タスク・シーンへの適応を最小限の労力で実現。 - pre-trained policy 単体(13.8%)や kinematic retargeting 単体(52.5%)を大きく上回る 83.8% の平均成功率を達成。 - pre-trained generalist policy が完全に失敗するタスクでも成功。

3. 技術・手法の肝は?

- 第一の洞察: 人間デモの手の動きがロボット end-effector 軌道の有用な prior になる。kinematic retargeting で粗い open-loop 軌道に変換。 - 第二の洞察: retargeted motion はタスク構造を捉えるが、文脈上の妥当なロボット行動と整合しない場合がある。 - pre-trained generalist diffusion policy を用いて軌道を修正し、人間の動きに従いつつ妥当なロボット行動の分布内に収める。

4. どうやって有効だと検証した?

- 実世界で 8 つの多様な manipulation タスクを実験。 - 平均成功率 83.8%(pre-trained policy 13.8%、kinematic retargeting 52.5% と比較)。 - pre-trained generalist policy が完全に失敗するタスクでも成功することを確認。

5. 議論はある?

- 要旨からは不明(限界や失敗ケースに関する議論は明示されていない)。

6. 次に読むべき論文は?

- pre-trained generalist diffusion policy(本手法が利用する基盤モデル) - kinematic retargeting(比較対象のベースライン) - online reinforcement learning ベースの模倣手法(比較対象として言及) - paired human-robot data を用いる手法(比較対象として言及)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Sungjae Park, Homanga Bharadhwaj, Shubham Tulsiani

分類: cs.RO, cs.LG

原文アブストラクト

We propose DemoDiffusion, a simple method for enabling robots to perform manipulation tasks by imitating a single human demonstration, without requiring task-specific training or paired human-robot data. Our approach is based on two insights. First, the hand motion in a human demonstration provides a useful prior for the robot's end-effector trajectory, which we can convert into a rough open-loop robot motion trajectory via kinematic retargeting. Second, while this retargeted motion captures the overall structure of the task, it may not align well with plausible robot actions in-context. To address this, we leverage a pre-trained generalist diffusion policy to modify the trajectory, ensuring it both follows the human motion and remains within the distribution of plausible robot actions. Unlike approaches based on online reinforcement learning or paired human-robot data, our method enables robust adaptation to new tasks and scenes with minimal effort. In real-world experiments across 8 diverse manipulation tasks, DemoDiffusion achieves 83.8\% average success rate, compared to 13.8\% for the pre-trained policy and 52.5\% for kinematic retargeting, succeeding even on tasks where the pre-trained generalist policy fails entirely. Project page: https://demodiffusion.github.io/

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI