日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

遠隔操作arXiv:2602.01632

上半身ヒューマノイドロボット遠隔操作のための閉形式幾何学的リターゲティング解法

A Closed-Form Geometric Retargeting Solver for Upper Body Humanoid Robot Teleoperation

シェア:XThreadsFacebookLINEはてブBluesky

人間の腕の向きにロボットアームを合わせることで、高速かつ高精度な遠隔操作を実現する閉形式解法SEW-Mimicを提案。

詳しい要約

1. どんなもの?

- 人間の上半身動作を双腕ヒューマノイドロボットアームへ写像するteleoperation向けretargeting手法。 - 名称はSEW-Mimic。肩・肘・手首(shoulder, elbow, wrist; SEW)のkeypointから上腕・前腕の向きを同定し、ロボットアームをその向きに合わせる。 - retargetingを位置合わせではなく向き合わせ問題として再定式化し、closed-formの幾何学的解法と最適性保証を与える。 - 商用CPUで3 kHzの高速推論を実現し、双腕自己衝突回避のsafety filterなど下流処理の余裕を残す。 - 7自由度アームやhumanoidに適合し、keypoint入力源に依存しない。

2. 先行研究と比べてどこがすごい?

- 既存手法はロボットend-effectorを人間の手の位置・向きに一致させる最適化を行うため、準最適・低速で、不要な動きやlatencyを生じやすい。 - またend-effector一致型ではロボットのworkspaceが人間のworkspaceに制限される。 - 本手法は向き合わせ問題へ再定式化することでclosed-form解と最適性保証を得て、計算時間と精度で他retargeting手法を上回る。 - 3 kHz推論により下流アプリの計算余裕を確保する点も従来と異なる。

3. 技術・手法の肝は?

- retargetingをorientation alignment問題として捉え、closed-formの幾何学的アルゴリズムで解く。 - SEW keypointから人間の上腕・前腕の向きを同定し、ロボットアームをその向きに整列させる。 - 最適性保証付きの解を返し、7自由度アームやhumanoidに適用可能。 - 入力keypoint源に非依存で、商用CPU上で3 kHzの推論を実現。 - 下流例として双腕自己衝突を避けるsafety filterを組み込む。

4. どうやって有効だと検証した?

- 他retargeting手法と比較し、計算時間と精度で優位であることを実験で示す。 - pilot user studyによりteleoperationタスク成功率の改善を示唆。 - SEW-Mimicで収集したデータがよりsmoothであるためpolicy learningを改善する予備解析を示す。 - full-body humanoid retargetingを加速するdrop-in手法としても機能することを示す。 - ハードウェア実演により実用性を例示。

5. 議論はある?

- 既存手法のend-effector位置・向き一致最適化が準最適・低速で、不要な動きやlatency、workspace制限を生む点を問題視。 - 向き合わせへの再定式化によりclosed-form解と最適性保証が得られ、高速推論が下流処理の余裕を生むと主張。 - pilot user studyや予備解析は示唆に留まり、大規模検証や限界は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている既存retargeting手法(具体的名称は要旨からは不明)。 - end-effector位置・向き一致に基づく最適化型retargeting。 - full-body humanoid retargeting。 - policy learning(模倣学習)関連。 - safety filter(双腕自己衝突回避)。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Chuizheng Kong, Yunho Cho, Wonsuhk Jung, Idris Wibowo, Parth Shinde, Sundhar Vinodh-Sangeetha, Long Kiu Chung, Zhenyang Chen, Andrew Mattei, Advaith Nidumukkala, Alexander Elias, Danfei Xu, Taylor Higgins, Shreyas Kousik

分類: cs.RO

原文アブストラクト

Retargeting human motion to robot poses is a practical approach for teleoperating bimanual humanoid robot arms, but existing methods can be suboptimal and slow, often causing undesirable motion or latency. This is due to optimizing to match robot end-effector to human hand position and orientation, which can also limit the robot's workspace to that of the human. Instead, this paper reframes retargeting as an orientation alignment problem, enabling a closed-form, geometric solution algorithm with an optimality guarantee. The key idea is to align a robot arm to a human's upper and lower arm orientations, as identified from shoulder, elbow, and wrist (SEW) keypoints; hence, the method is called SEW-Mimic. The method has fast inference (3 kHz) on standard commercial CPUs, leaving computational overhead for downstream applications; an example in this paper is a safety filter to avoid bimanual self-collision. The method suits most 7-degree-of-freedom robot arms and humanoids, and is agnostic to input keypoint source. Experiments show that SEW-Mimic outperforms other retargeting methods in computation time and accuracy. A pilot user study suggests that the method improves teleoperation task success. Preliminary analysis indicates that data collected with SEW-Mimic improves policy learning due to being smoother. SEW-Mimic is also shown to be a drop-in way to accelerate full-body humanoid retargeting. Finally, hardware demonstrations illustrate SEW-Mimic's practicality. The results emphasize the utility of SEW-Mimic as a fundamental building block for bimanual robot manipulation and humanoid robot teleoperation.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI