日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2511.10987

段階的な運動学的・動学的整合による器用なマニピュレーションの転移

Dexterous Manipulation Transfer via Progressive Kinematic-Dynamic Alignment

シェア:XThreadsFacebookLINEはてブBluesky

人間の手の操作動画から、多指ロボットハンドの高品質な操作軌道を自動生成する転移システムを提案。運動学的整合と動的最適化を段階的に行うことで、大量の訓練データなしに器用な操作を実現する。

詳しい要約

1. どんなもの?

- 多指ロボットハンドの操作データ不足を解消するため、人間の手の操作動画から高品質な dexterous manipulation trajectory を生成する hand-agnostic な manipulation transfer system を提案 - 大量の学習データを必要とせず、異なる dexterous hand・物体カテゴリ・タスクに自動でシステムパラメータを設定 - 平均 transfer success rate 73% を達成し、スケーラブルなデータ収集手法を提供

2. 先行研究と比べてどこがすごい?

- 従来は multi-fingered robot hand hardware platform でのデータ収集が困難でスケールせず、data-driven dexterous manipulation policy learning の研究を妨げていた - 本手法は massive training data を必要とせず、human hand manipulation video のみから trajectory を生成 - 異なる dexterous hand・物体・タスク間で kinematic matching と dynamic optimization を両立させる点が先行研究と異なる - 具体的な比較対象論文は要旨からは不明

3. 技術・手法の肝は?

- 人間の手と dexterous hand の多次元の差異、および高自由度協調制御の課題に対し progressive transfer framework を設計 - 第一段階: kinematic matching に基づき dexterous hand の primary control signal を確立 - 第二段階: action space rescaling と thumb-guided initialization を用いた residual policy を学習し、unified reward の下で contact interaction を動的に最適化 - 第三段階: 操作の意味を保つ目的で wrist control trajectory を計算 - タスクごとにシステムパラメータを自動設定し、kinematic matching と dynamic optimization をバランス

4. どうやって有効だと検証した?

- extensive experimental results により、滑らかで意味的に正しい dexterous hand manipulation を自動生成し、人間の意図を忠実に再現できることを示す - 高い効率性と強い generalizability を確認 - 平均 transfer success rate 73% を達成 - 具体的な実験設定・比較手法・データセットは要旨からは不明

5. 議論はある?

- 平均成功率 73% であり、失敗ケースの分析や限界については要旨からは不明 - 異なる dexterous hand・物体カテゴリ・タスクへの generalizability を主張するが、その範囲や条件の詳細は要旨からは不明 - データ収集手法としてのスケーラビリティや実装容易性を主張 - 議論・制限に関する具体的記述は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない - 関連手法として data-driven dexterous manipulation policy learning、human-to-robot manipulation transfer、kinematic matching、residual policy learning、reinforcement learning 系の dexterous manipulation 研究を挙げる - 具体的な論文名は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Wenbin Bai, Qiyu Chen, Xiangbo Lin, Jianwen Li, Quancheng Li, Hejiang Pan, Yi Sun

分類: cs.RO

原文アブストラクト

The inherent difficulty and limited scalability of collecting manipulation data using multi-fingered robot hand hardware platforms have resulted in severe data scarcity, impeding research on data-driven dexterous manipulation policy learning. To address this challenge, we present a hand-agnostic manipulation transfer system. It efficiently converts human hand manipulation sequences from demonstration videos into high-quality dexterous manipulation trajectories without requirements of massive training data. To tackle the multi-dimensional disparities between human hands and dexterous hands, as well as the challenges posed by high-degree-of-freedom coordinated control of dexterous hands, we design a progressive transfer framework: first, we establish primary control signals for dexterous hands based on kinematic matching; subsequently, we train residual policies with action space rescaling and thumb-guided initialization to dynamically optimize contact interactions under unified rewards; finally, we compute wrist control trajectories with the objective of preserving operational semantics. Using only human hand manipulation videos, our system automatically configures system parameters for different tasks, balancing kinematic matching and dynamic optimization across dexterous hands, object categories, and tasks. Extensive experimental results demonstrate that our framework can automatically generate smooth and semantically correct dexterous hand manipulation that faithfully reproduces human intentions, achieving high efficiency and strong generalizability with an average transfer success rate of 73%, providing an easily implementable and scalable method for collecting robot dexterous manipulation data.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI