日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

遠隔操作arXiv:2602.15060

CLOT: 全身ヒューマノイド遠隔操作のための閉ループ大域モーショントラッキング

CLOT: Closed-Loop Global Motion Tracking for Whole-Body Humanoid Teleoperation

シェア:XThreadsFacebookLINEはてブBluesky

高頻度の自己位置推定フィードバックにより、全身ヒューマノイド遠隔操作における大域的な姿勢ドリフトを解消する閉ループ追従システムを提案し、実機で高精度・高ロバストな動作を実現した。

詳しい要約

1. どんなもの?

本論文は、CLOT (Closed-Loop Global Motion Tracking) という、全身ヒューマノイドのテレオペレーションシステムを提案している。長期的な全身テレオペレーションでは、特にフルサイズのヒューマノイドにおいて、グローバル姿勢のドリフトが蓄積することが課題である。CLOTは、高頻度のローカリゼーションフィードバックを用いて閉ループのグローバルモーショントラッキングを実現し、オペレータとロボットの姿勢を閉ループで同期させることで、長期間にわたるドリフトのない人間からヒューマノイドへの模倣を可能にする。

2. 先行研究と比べてどこがすごい?

近年の学習ベースのトラッキング手法は、俊敏で協調的な動きを可能にするが、通常はロボットのローカルフレームで動作し、グローバル姿勢フィードバックを無視するため、長時間の実行でドリフトや不安定性が生じる。CLOTは、閉ループのグローバルモーショントラッキングを導入することで、この問題を解決し、ドリフトのない長期的な模倣を実現する点が先行研究と比べて優れている。

3. 技術・手法の肝は?

CLOTの技術的な肝は、以下の点にある。 - 高頻度のローカリゼーションフィードバックによる閉ループのグローバルモーショントラッキング。 - 強化学習において直接グローバルトラッキング報酬を与えると、攻撃的で脆い修正が生じるため、データ駆動型のランダム化戦略を提案し、観測軌道と報酬評価を分離することで、滑らかで安定したグローバル修正を可能にする。 - さらに、敵対的モーションプライアを用いてポリシーを正則化し、不自然な行動を抑制する。 - トランスフォーマーベースのポリシーを設計し、1300 GPU時間以上かけて訓練。 - 31 DoF(手を除く)のフルサイズヒューマノイドに展開。

4. どうやって有効だと検証した?

シミュレーションと実世界の両方の実験により、高ダイナミックな動き、高精度のトラッキング、およびsim-to-realヒューマノイドテレオペレーションにおける強いロバスト性が検証されている。また、20時間の厳選された人間のモーションデータを収集し、ヒューマノイドテレオペレーションポリシーの訓練に使用している。

5. 議論はある?

要旨からは、具体的な議論や限界についての言及は不明である。ただし、直接グローバルトラッキング報酬を強化学習に課すと攻撃的で脆い修正が生じる問題や、不自然な行動を抑制する必要性について言及されている。

6. 次に読むべき論文は?

要旨で参照/比較されている研究は明示されていないが、関連手法として、学習ベースのトラッキング手法(local frameで動作するもの)や、強化学習を用いたヒューマノイド制御、敵対的モーションプライア、トランスフォーマーベースのポリシーなどが挙げられる。同分野の定番としては、DeepMimicやAMP (Adversarial Motion Priors) などが考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Tengjie Zhu, Guanyu Cai, Yang Zhaohui, Guanzhu Ren, Haohui Xie, ZiRui Wang, Junsong Wu, Jingbo Wang, Xiaokang Yang, Yao Mu, Yichao Yan

分類: cs.RO, cs.AI

原文アブストラクト

Long-horizon whole-body humanoid teleoperation remains challenging due to accumulated global pose drift, particularly on full-sized humanoids. Although recent learning-based tracking methods enable agile and coordinated motions, they typically operate in the robot's local frame and neglect global pose feedback, leading to drift and instability during extended execution. In this work, we present CLOT, a real-time whole-body humanoid teleoperation system that achieves closed-loop global motion tracking via high-frequency localization feedback. CLOT synchronizes operator and robot poses in a closed loop, enabling drift-free human-to-humanoid mimicry over long timehorizons. However, directly imposing global tracking rewards in reinforcement learning, often results in aggressive and brittle corrections. To address this, we propose a data-driven randomization strategy that decouples observation trajectories from reward evaluation, enabling smooth and stable global corrections. We further regularize the policy with an adversarial motion prior to suppress unnatural behaviors. To support CLOT, we collect 20 hours of carefully curated human motion data for training the humanoid teleoperation policy. We design a transformer-based policy and train it for over 1300 GPU hours. The policy is deployed on a full-sized humanoid with 31 DoF (excluding hands). Both simulation and real-world experiments verify high-dynamic motion, high-precision tracking, and strong robustness in sim-to-real humanoid teleoperation. Motion data, demos and code can be found in our website.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI