日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

遠隔操作/器用な手/リターゲティングarXiv:2605.12182

DexTwist: MR遠隔操作によるねじり動作のための器用な手のリターゲティング

DexTwist: Dexterous Hand Retargeting for Twist Motion via Mixed Reality-based Teleoperation

シェア:XThreadsFacebookLINEはてブBluesky

MRベースの遠隔操作で、キャップ開けやねじ回しなどの回転操作を安定して行うため、操作者の意図したねじ軸と回転量を推定し、リアルタイムに手先の関節を補正するフレームワークを提案した。

詳しい要約

1. どんなもの?

- MRベースの遠隔操作によるdexterous handのretargetingで、接触を伴う回転操作(cap opening, key turning, bolt screwing)に特化したDexTwistを提案。 - tripod pinchを検出し、操作者の意図するscrew axisとtwist magnitudeを推定。 - 実時間のresidual joint-space refinementでturn progressを追従しつつ、robot tripod geometryを正則化。 - virtual-object objective(turning angle, screw axis consistency, fingertip closure, tripod stability)を最小化。

2. 先行研究と比べてどこがすごい?

- 従来のkinematic dissimilarity最小化(joint angleやfingertip position error)は、embodiment gap(link length, joint axis/limit, fingertip geometryの不一致)により、接触を伴う回転操作でtangential fingertip slidingを引き起こし、screw axis drift, contact slip, grasp instabilityが生じる。 - DexTwistは機能的なtwist-retargetingを行い、直接的なpose imitationではなく、回転操作の成功に必要なscrew axisとtwist magnitudeを追従。 - シミュレーションと実世界実験で、vector-based retargeting baselineと比較してturning angle trackingとscrew axis stabilityが向上。

3. 技術・手法の肝は?

- MR-based teleoperationインタフェースを使用。 - tripod pinchを検出し、操作者の意図するscrew axisとtwist magnitudeを推定。 - 実時間のresidual joint-space refinementを適用。 - virtual-object objectiveを最小化:turning angle, screw axis consistency, fingertip closure, tripod stability。 - これにより、robot tripod geometryを正則化しつつ、turn progressを追従。

4. どうやって有効だと検証した?

- シミュレーションと実世界実験を実施。 - vector-based retargeting baselineと比較。 - 評価指標:turning angle trackingとscrew axis stability。 - 結果:DexTwistがこれらの指標でbaselineを上回る。

5. 議論はある?

- 要旨からは不明。 - ただし、embodiment gapや接触を伴う回転操作の課題が背景として述べられている。

6. 次に読むべき論文は?

- vector-based retargeting baseline(関連手法として比較)。 - その他のdexterous hand retargeting手法(例:kinematic dissimilarity最小化に基づく従来手法)。 - MR-based teleoperationに関する研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Dongmyoung Lee, Chengxi Li, Dongheui Lee

分類: cs.RO

原文アブストラクト

Dexterous teleoperation via Mixed Reality (MR)-based interfaces offers a scalable paradigm for transferring human manipulation skills to dexterous robot hands. However, conventional retargeting approaches that minimize kinematic dissimilarity (e.g., joint angle or fingertip position error) often fail in contact-rich rotational manipulation, such as cap opening, key turning, and bolt screwing. This failure stems from the embodiment gap: mismatched link lengths, joint axes/limits, and fingertip geometry can cause direct pose imitation to induce tangential fingertip sliding rather than stable object rotation, resulting in screw axis drift, contact slip, and grasp instability. To address this, we propose DexTwist, a functional twist-retargeting framework for MR-based dexterous teleoperation. DexTwist detects a tripod pinch, estimates the operator's intended screw axis and twist magnitude, and applies a real-time residual joint-space refinement that tracks turning progress while regularizing the robot tripod geometry. The refinement minimizes a virtual-object objective defined by turning angle, screw axis consistency, fingertip closure, and tripod stability. Simulation and real-world experiments show that DexTwist improves turning angle tracking and screw axis stability compared with a vector-based retargeting baseline.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI