日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

器用操作arXiv:2606.03268

EaDex: 低コストデモからのクロスエンボディ器用操作フレームワーク

EaDex: A Cross-Embodiment Dexterous Manipulation Framework from Low-Cost Demonstrations

シェア:XThreadsFacebookLINEはてブBluesky

単一RGB-Dカメラで人間の手の動きを捉え、MANOモデルとモーションリターゲティングで構造化デモデータを生成し、接触報酬に基づく動的デモアニーリングで学習を効率化する、低コストな多エンボディ器用操作学習フレームワークを提案した。

詳しい要約

1. どんなもの?

- EaDexは低コストデモンストレーション条件下での多身体性器用操作学習フレームワーク。 - 単一RGB-Dカメラで人間の手の動きを取得し、MANOベースの手モデリング、データ正規化、動作リターゲティングで構造化デモデータを構築。 - 学習レベルでは接触報酬ベースの動的デモンストレーションアニーリング機構を導入。 - 3種の器用な手と3種の関節物体開閉タスク、9つのクロス身体性操作設定で評価。

2. 先行研究と比べてどこがすごい?

- 従来の純粋強化学習は大規模な対話的探索を要し、模倣学習は高価な高品質デモに依存。 - EaDexは低コストデモ条件下で迅速なデモデータ生成を可能にし、訓練時間を短縮。 - デモンストレーションアニーリングなしのベースラインに対し55.3%の相対改善を達成。

3. 技術・手法の肝は?

- データレベル:単一RGB-Dカメラで人間の手の動きをキャプチャし、MANOベースの手モデリング、データ正規化、動作リターゲティングを実施。 - 学習レベル:接触報酬ベースの動的デモンストレーションアニーリング機構を導入。 - 初期探索をデモで導き、接触報酬の蓄積に伴い自律最適化へ徐々に移行。

4. どうやって有効だと検証した?

- カスタムデータセットを使用し、3種の器用な手と3種の関節物体開閉タスク、9つのクロス身体性操作設定で評価。 - デモンストレーションアニーリングなしのベースラインと比較し、55.3%の相対改善を確認。 - 低コストデモパイプラインと動的デモンストレーションアニーリング戦略の有効性を検証。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 同分野の定番として、模倣学習(Imitation Learning)、強化学習(Reinforcement Learning)、MANO、動作リターゲティング(Motion Retargeting)に関する論文が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Qian Zhao, Xin Tong, Chengdong Wu, Yang Yang, Yingtian Li

分類: cs.RO

原文アブストラクト

Dexterous manipulation learning has long been hindered by the high costs of data and training, as pure reinforcement learning typically requires large-scale interactive exploration and imitation learning depends on high-quality demonstrations that are expensive to collect. To address this problem, we propose EaDex, a multi-embodiment dexterous manipulation learning framework under low-cost demonstration conditions, which enables rapid generation of demonstration data and consequently reduces training time for efficient dexterous manipulation. At the data level, EaDex captures human hand motions using only a single RGB-D camera and constructs structured demonstration data through MANO-based hand modeling, data normalization, and motion retargeting. At the learning level, we introduce a contact-reward-based dynamic demonstration annealing mechanism, which guides early-stage exploration under demonstration and gradually transitions to autonomous optimization with accumulating contact rewards. Using our custom dataset, we evaluate EaDex on three dexterous hands and three articulated object-opening tasks, covering nine cross-embodiment manipulation settings, achieving a 55.3% relative improvement over the baseline without demonstration annealing. These results validate the effectiveness of the proposed low-cost demonstration pipeline and the dynamic demonstration annealing strategy for dexterous manipulation learning.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI