テレオペレーション/器用操作2026/6/1arXiv:2606.06033

RealDexUMI: 器用なロボット学習のためのウェアラブル汎用操作インターフェース

RealDexUMI: A Wearable Universal Manipulation Interface for Dexterous Robot Learning

手先の細かい操作を保ちつつ実機展開可能なデモ収集を実現するため、共有の器用なエンドエフェクタと掌側同型テレオペ用手袋を備えたウェアラブル操作インターフェースを提案し、8つの実ロボットタスクで平均成功率88.75%を達成した。

詳しい要約

1. どんなもの？

- 装着型の汎用manipulation interface「RealDexUMI」を提案 - 共通のdexterous end-effector moduleを中核に据える - 軽量dexterous hand - in-hand vision - fingertip tactile sensing - palm-sideのisomorphic teleoperation gloveで人間の指入力をrobot-hand関節指令へ写像 - 収集とdeploymentで同一のhand・sensing moduleを共有し、zero-gapなend-effectorデータを得る - 8つのreal-robotタスクで検証

2. 先行研究と比べてどこがすごい？

- 既存pipelineはretargetingやembodiment conversionでdeployableなdexterityを失う問題があった - あるいはrobot-specific teleoperationに依存し、scaleが高コストで、dexterousデータ収集の直感的・接触認識的な制御に乏しかった - RealDexUMIはretargeting-freeで、収集とdeployment間のend-effectorデータのgapをゼロにする点が異なる - in-hand観測・tactile信号・接触・hand actionが収集時とdeployment時で一致する - 3つのembodiment間でtransfer可能

3. 技術・手法の肝は？

- 共通のdexterous end-effector moduleを設計 - 軽量dexterous hand - in-hand vision - fingertip tactile sensing - palm-side isomorphic teleoperation glove - 人間の指入力をrobot-hand関節コマンドへ直接マッピング - real-time、retargeting-free、直感的、精密なhand制御 - 収集とdeploymentで同一hand・sensing moduleを共有 - zero-gap end-effectorデータ - in-hand観測、tactile信号、接触、hand actionが一致

4. どうやって有効だと検証した？

- 8つのreal-robotタスクで検証 - fine-grained - contact-rich - long-horizon - bimanual manipulation - RealDexUMIデータで学習したpolicyが平均成功率88.75%を達成 - 未見のinitial poseへgeneralize - 3つのembodiment間でtransferすることを確認

5. 議論はある？

- 要旨からは不明 - 限界、失敗事例、tactile sensingの寄与、gloveの装着性やコスト、他タスクへの汎化範囲についての議論は要旨に記載がない

6. 次に読むべき論文は？

- 要旨で参照・比較されている個別研究は明示されていない - 関連手法として、robot teleoperation、retargeting、embodiment conversion、dexterous manipulation learning、tactile sensing、in-hand visionの定番研究を挙げる - 具体的な論文名は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Chaoyi Xu, Yixuan Jiang, Jiahui Huan, Yuhui Fu, Haoyu Zhou, Weitian Yuan, Jiayi Yu, Wanpeng Zhang, Haoqi Yuan, Zongqing Lu

分類: cs.RO

原文アブストラクト

Learning dexterous manipulation requires demonstrations that preserve fine hand-object interactions while remaining executable at deployment. Existing pipelines either lose deployable dexterity through retargeting or embodiment conversion, or rely on robot-specific teleoperation that is costly to scale and often lacks intuitive, contact-aware control for dexterous data collection. We present RealDexUMI, a wearable universal manipulation interface built around a shared dexterous end-effector module that integrates a lightweight dexterous hand, in-hand vision, and fingertip tactile sensing. A palm-side isomorphic teleoperation glove maps human finger inputs to robot-hand joint commands, enabling real-time, retargeting-free, intuitive, and precise hand control. The shared hand and sensing modules yield zero-gap end-effector data, with matched in-hand observations, tactile signals, contacts, and hand actions between collection and deployment. Across eight real-robot tasks spanning fine-grained, contact-rich, long-horizon, and bimanual manipulation, policies trained on RealDexUMI data achieve an average success rate of 88.75%, generalize to unseen initial poses, and transfer across three embodiments. Website: https://research.beingbeyond.com/realdexumi

arXivで原文を読む →arXiv概要ページ

← 論文一覧