日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2505.24853

DexMachina:両手巧みな操作のための機能的リターゲティング

DexMachina: Functional Retargeting for Bimanual Dexterous Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

人間の両手による物体操作のデモンストレーションから、関節物体を長期的に操作する巧みなロボットハンドのポリシーを学習する手法を提案。仮想物体コントローラを徐々に弱めるカリキュラム学習により、人間とロボットの身体性ギャップを克服する。

詳しい要約

1. どんなもの?

- 本研究は functional retargeting 問題を扱う。 - 人間の hand-object demonstrations から物体状態を追従する dexterous manipulation policy を学習する。 - 対象は articulated objects を用いた long-horizon かつ bimanual なタスク。 - DexMachina という curriculum-based algorithm を提案。 - 多様なタスクと dexterous hands を含む simulation benchmark も公開。 - ハードウェア設計の functional comparison を可能にする知見も提示。

2. 先行研究と比べてどこがすごい?

- 先行研究との具体的比較は要旨からは不明。 - 課題として large action space、spatiotemporal discontinuities、human と robot hands 間の embodiment gap を挙げる。 - これらを扱う curriculum-based 手法を提案し、baseline methods を大きく上回ると報告。 - 単一タスクでなく long-horizon bimanual かつ articulated objects を対象とする点を強調。 - ベンチマーク公開によりハードウェア設計比較の基盤を提供。

3. 技術・手法の肝は?

- 核となるアイデアは virtual object controllers を decaying strength で用いること。 - まず物体を target states へ自動的に駆動する。 - その motion と contact guidance の下で policy が徐々に制御を引き継ぐ curriculum を構成。 - これにより large action space や embodiment gap 下での学習を支援。 - 詳細なネットワーク構成や報酬設計は要旨からは不明。

4. どうやって有効だと検証した?

- 多様なタスクと dexterous hands を含む simulation benchmark を構築。 - DexMachina を baseline methods と比較し、有意に優れることを示す。 - quantitative および qualitative な結果を提示。 - ハードウェア設計の functional comparison に基づく知見を報告。 - 実機実験の有無は要旨からは不明。

5. 議論はある?

- ハードウェア設計の functional comparison と望ましい hardware capabilities の同定に言及。 - 研究コミュニティ参入の障壁を下げるプラットフォーム提供を意図。 - 限界や失敗事例の詳細は要旨からは不明。 - 実世界への転移可能性の議論は要旨からは不明。 - 定量的な性能差の内訳は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない。 - 関連手法として functional retargeting、curriculum learning、virtual object controllers を用いる研究を挙げる。 - 同分野の定番として human-to-robot motion retargeting や dexterous manipulation の imitation learning 関連研究を参照すべき。 - 具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhao Mandi, Yifan Hou, Dieter Fox, Yashraj Narang, Ajay Mandlekar, Shuran Song

分類: cs.RO, cs.AI, cs.LG

原文アブストラクト

We study the problem of functional retargeting: learning dexterous manipulation policies to track object states from human hand-object demonstrations. We focus on long-horizon, bimanual tasks with articulated objects, which is challenging due to large action space, spatiotemporal discontinuities, and embodiment gap between human and robot hands. We propose DexMachina, a novel curriculum-based algorithm: the key idea is to use virtual object controllers with decaying strength: an object is first driven automatically towards its target states, such that the policy can gradually learn to take over under motion and contact guidance. We release a simulation benchmark with a diverse set of tasks and dexterous hands, and show that DexMachina significantly outperforms baseline methods. Our algorithm and benchmark enable a functional comparison for hardware designs, and we present key findings informed by quantitative and qualitative results. With the recent surge in dexterous hand development, we hope this work will provide a useful platform for identifying desirable hardware capabilities and lower the barrier for contributing to future research. Videos and more at https://project-dexmachina.github.io/

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI