日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

遠隔操作arXiv:2605.12347

IMUモーションキャプチャによる人型ロボットのリアルタイム全身遠隔操作:Sim2SimとSim2Real検証

Real-Time Whole-Body Teleoperation of a Humanoid Robot Using IMU-Based Motion Capture with Sim2Sim and Sim2Real Validation

シェア:XThreadsFacebookLINEはてブBluesky

IMUベースのモーションキャプチャスーツで計測した人間の動作をUnitree G1人型ロボットに直接マッピングし、オフライン処理や学習を用いずに低遅延で全身遠隔操作するシステムを構築。シミュレーションと実機の両方で安定した動作再現を実証した。

詳しい要約

1. どんなもの?

- 本論文は、IMUベースのモーションキャプチャスーツ(Virdyn)を用いて、人間の全身運動をUnitree G1ヒューマノイドロボットにリアルタイムでテレオペレーションするシステムを提案する。 - システムは、運動処理、キネマティックリターゲティング、制御パイプラインから構成され、オフラインバッファリングや学習ベースの要素を一切使用せず、連続的かつ低遅延で動作する。 - シミュレーション(MuJoCo)で検証後、物理プラットフォームに変更なしで展開し、歩行、立ち、座り、旋回、お辞儀、協調的な全身ジェスチャーなど多様な動作を安定して再現する。

2. 先行研究と比べてどこがすごい?

- 従来の全身テレオペレーションは、人間とロボットの運動学的ミスマッチ、慣性センサノイズの蓄積、制御遅延、sim-to-realギャップなどの課題があった。 - 本研究は、オフラインバッファリングや学習ベースのコンポーネントを排除し、リアルタイムで低遅延な動作を実現する点が新しい。 - また、市販のウェアラブルモーションキャプチャハードウェアを用いて、シミュレーションから実機への直接転送を実現した点が先行研究と異なる。

3. 技術・手法の肝は?

- Virdyn IMUベースの全身モーションキャプチャスーツで人間の動きを記録。 - カスタムの運動処理、キネマティックリターゲティング、制御パイプラインを開発し、オフラインバッファリングや学習ベースの要素なしで連続的・低遅延動作を実現。 - Unitree G1のMuJoCo物理モデルを用いたシミュレーション(sim2sim)で検証後、変更なしで物理プラットフォームに展開(sim2real)。

4. どうやって有効だと検証した?

- シミュレーション(MuJoCo)でシステムを検証(sim2sim)。 - その後、物理プラットフォームに変更なしで展開し(sim2real)、歩行、立ち、座り、旋回、お辞儀、協調的な全身ジェスチャーを含む多様な動作の安定した同期再現を実験的に確認。

5. 議論はある?

- 要旨からは、システムの限界や議論の詳細は不明。 - ただし、安定性、低遅延、運動学的ミスマッチ、センサノイズ、sim-to-realギャップなどの課題に対処したと述べられている。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として、IMUベースのモーションキャプチャ、キネマティックリターゲティング、sim2sim/sim2real転送、ヒューマノイドロボットのテレオペレーションに関する研究が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Hamza Ahmed Durrani, Suleman Khan

分類: cs.RO

原文アブストラクト

Stable, low-latency whole-body teleoperation of humanoid robots is an open research challenge, complicated by kinematic mismatches between human and robot morphologies, accumulated inertial sensor noise, non-trivial control latency, and persistent sim-to-real transfer gaps. This paper presents a complete real-time whole-body teleoperation system that maps human motion, recorded with a Virdyn IMU-based full-body motion capture suit, directly onto a Unitree G1 humanoid robot. We introduce a custom motion-processing, kinematic retargeting, and control pipeline engineered for continuous, low-latency operation without any offline buffering or learning-based components. The system is first validated in simulation using the MuJoCo physics model of the Unitree G1 (sim2sim), and then deployed without modification on the physical platform (sim2real). Experimental results demonstrate stable, synchronized reproduction of a broad motion repertoire, including walking, standing, sitting, turning, bowing, and coordinated expressive full-body gestures. This work establishes a practical, scalable framework for whole-body humanoid teleoperation using commodity wearable motion capture hardware.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3Google DeepMind、ロボット向けAIを発表新製品・発表
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI