日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

模倣学習arXiv:2602.11464

EasyMimic:人間の動画からロボット模倣学習を低コストで実現するフレームワーク

EasyMimic: A Low-Cost Framework for Robot Imitation Learning from Human Videos

シェア:XThreadsFacebookLINEはてブBluesky

家庭用低コストロボットが、RGBカメラで撮影した人間の動画から3D手軌跡を抽出し、把持制御空間にマッピングして模倣学習する手法を提案。少量のロボットデータとの共同学習で新タスクに迅速適応し、高コストなデータ収集を削減する。

詳しい要約

1. どんなもの?

- 低コストロボット向けの模倣学習フレームワーク EasyMimic を提案。 - 標準 RGB カメラで撮影した人間の動画デモから操作ポリシーを学習。 - 家庭用の低コストロボットを対象とし、ユーザーフレンドリーで手頃な価格を目指す。 - 3D 手軌跡抽出、action alignment、hand visual augmentation、co-training を組み合わせる。 - LeRobot プラットフォームで検証。

2. 先行研究と比べてどこがすごい?

- 従来は大規模な実世界データ収集のコストが高く、低コストロボットでは特に困難。 - EasyMimic は人間動画から学習することで、高価なロボットデータ収集への依存を大幅に削減。 - 低コストかつ再現可能なソリューションを提供。 - 家庭用ロボットへの知能導入への実用的な道筋を示す。

3. 技術・手法の肝は?

- 標準 RGB カメラで撮影した人間動画から 3D 手軌跡を抽出。 - action alignment モジュールで軌跡を低コストロボットのグリッパ制御空間にマッピング。 - human-to-robot のドメインギャップを埋めるため、シンプルで使いやすい hand visual augmentation を導入。 - co-training 手法で、処理済み人間データと少量のロボットデータの両方でモデルをファインチューニングし、新タスクに迅速適応。

4. どうやって有効だと検証した?

- 低コスト LeRobot プラットフォーム上で実験。 - 様々な操作タスクで高い性能を達成することを示した。 - 高価なロボットデータ収集への依存を大幅に削減できることを実証。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- LeRobot プラットフォーム(関連研究として言及)。 - 模倣学習全般の定番として Behavior Cloning、DAgger などが考えられるが、要旨では具体的に参照されていない。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Tao Zhang, Song Xia, Ye Wang, Qin Jin

分類: cs.RO

原文アブストラクト

Robot imitation learning is often hindered by the high cost of collecting large-scale, real-world data. This challenge is especially significant for low-cost robots designed for home use, as they must be both user-friendly and affordable. To address this, we propose the EasyMimic framework, a low-cost and replicable solution that enables robots to quickly learn manipulation policies from human video demonstrations captured with standard RGB cameras. Our method first extracts 3D hand trajectories from the videos. An action alignment module then maps these trajectories to the gripper control space of a low-cost robot. To bridge the human-to-robot domain gap, we introduce a simple and user-friendly hand visual augmentation strategy. We then use a co-training method, fine-tuning a model on both the processed human data and a small amount of robot data, enabling rapid adaptation to new tasks. Experiments on the low-cost LeRobot platform demonstrate that EasyMimic achieves high performance across various manipulation tasks. It significantly reduces the reliance on expensive robot data collection, offering a practical path for bringing intelligent robots into homes. Project website: https://zt375356.github.io/EasyMimic-Project/.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI