日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

テレオペレーションarXiv:2507.03227

人間の動作リターゲティングによる20自由度ByteDexterハンドの巧みなテレオペレーション

Dexterous Teleoperation of 20-DoF ByteDexter Hand via Human Motion Retargeting

シェア:XThreadsFacebookLINEはてブBluesky

20自由度のロボットハンドと腕のテレオペレーションシステムを開発し、人間の手の動きをリアルタイムで高忠実に再現することで、巧みな操作のデモデータを生成できることを示した。

詳しい要約

1. どんなもの?

- 20-DoF の linkage 駆動型 anthropomorphic robotic hand「ByteDexter Hand」を、人間の手・腕の動きから teleoperation するシステム - 目的は imitation learning 用の高品質な human demonstration data の生成 - 構成要素は (1) 20-DoF のロボットハンド、(2) 最適化ベースの motion retargeting による実時間・高忠実な手運動再現と hand-arm coordination

2. 先行研究と比べてどこがすごい?

- 先行研究として imitation learning による人間の dexterity 転移が挙げられているが、その有効性は demonstration data の品質に依存するという課題がある - 本研究は高 DoF ハンドの mechatronic design と、最適化ベース motion retargeting を統合し、複雑な手運動と hand-arm coordination を実時間で再現する点を狙う - 具体的な先行手法との定量比較は要旨からは不明

3. 技術・手法の肝は?

- 20-DoF の linkage-driven anthropomorphic robotic hand(ByteDexter Hand)を設計・使用 - optimization-based motion retargeting により、人間の手指の繊細な動きを実時間で高忠実にロボットハンドへ写像 - hand-arm teleoperation として手と腕の協調動作をシームレスに再現する統合システム

4. どうやって有効だと検証した?

- extensive empirical evaluations を実施 - dexterous in-hand manipulation タスクを含む評価 - 9 個の物体がランダムに配置された散らかった makeup table を整理する long-horizon タスクで検証 - 結果として実時間制御の直感的 teleoperation interface と高品質 demonstration data 生成能力を示す - 詳細は accompanying video を参照との記載

5. 議論はある?

- 要旨からは不明(限界・失敗事例・定量的な性能比較についての記述はない) - 示されている主張は、実時間性・直感性・高品質データ生成という定性的な実験結果に留まる

6. 次に読むべき論文は?

- imitation learning による human dexterity 転移に関する先行研究(要旨で言及) - optimization-based motion retargeting の関連手法 - 20-DoF 級 anthropomorphic robotic hand の mechatronic design 関連研究 - dexterous in-hand manipulation および long-horizon manipulation のベンチマーク研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ruoshi Wen, Jiajun Zhang, Guangzeng Chen, Zhongren Cui, Min Du, Yang Gou, Zhigang Han, Junkai Hu, Liqun Huang, Hao Niu, Wei Xu, Haoxiang Zhang, Zhengming Zhu, Hang Li, Zeyu Ren

分類: cs.RO

原文アブストラクト

Replicating human--level dexterity remains a fundamental robotics challenge, requiring integrated solutions from mechatronic design to the control of high degree--of--freedom (DoF) robotic hands. While imitation learning shows promise in transferring human dexterity to robots, the efficacy of trained policies relies on the quality of human demonstration data. We bridge this gap with a hand--arm teleoperation system featuring: (1) a 20--DoF linkage--driven anthropomorphic robotic hand for biomimetic dexterity, and (2) an optimization--based motion retargeting for real--time, high--fidelity reproduction of intricate human hand motions and seamless hand--arm coordination. We validate the system via extensive empirical evaluations, including dexterous in-hand manipulation tasks and a long--horizon task requiring the organization of a cluttered makeup table randomly populated with nine objects. Experimental results demonstrate its intuitive teleoperation interface with real--time control and the ability to generate high--quality demonstration data. Please refer to the accompanying video for further details.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI