日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

遠隔操作arXiv:2506.08931

CLONE: 長時間タスクのための閉ループ全身ヒューマノイド遠隔操作

CLONE: Closed-Loop Whole-Body Humanoid Teleoperation for Long-Horizon Tasks

シェア:XThreadsFacebookLINEはてブBluesky

MRヘッドセットによる頭と手のトラッキングのみから、閉ループ誤差補正とMoEベースの学習で全身ヒューマノイドの遠隔操作を実現し、長時間の軌道でも位置ドリフトを抑えて複雑な協調動作を可能にした研究。

詳しい要約

1. どんなもの?

- ヒューマノイドの全身teleoperationシステム「CLONE」の提案 - MR headsetによるheadとhandのtrackingのみを用いる - MoE(Mixture of Experts)ベースのアーキテクチャ - closed-loop error correctionにより長時間・長距離の全身teleoperationを実現 - 物体を床から拾うような協調動作を含むlong-horizonタスクを対象

2. 先行研究と比べてどこがすごい?

- 従来系は安定性のためupper-bodyとlower-bodyの制御を分離し、自然な協調を制限していた - 従来系はopen-loopでリアルタイム位置feedbackがなく、driftが蓄積していた - CLONEは全身協調を保ちつつ、closed-loop feedbackでtracking errorの蓄積を防ぐ - 安定性のための協調犠牲か、無制限のdriftかのトレードオフを解消する点が新しい

3. 技術・手法の肝は?

- MoEベースのteleoperationシステム - MR headsetからのhead・hand trackingのみを入力とする - closed-loop error correctionによりリアルタイムfeedbackで位置driftを補正 - 多様なmotion skillsを学習しつつ、tracking errorの累積を防止 - 全身の協調動作を維持する設計

4. どうやって有効だと検証した?

- 長距離trajectoryにおいて最小限のpositional driftを維持することを示した - 床から物体を拾うような複雑な協調動作を実現することで有効性を実証 - 詳細な定量評価指標や比較実験の設定は要旨からは不明

5. 議論はある?

- 長時間・長距離の全身teleoperationにおけるdrift蓄積が根本課題として議論されている - 安定性と全身協調のトレードオフが中心的論点 - 具体的な限界や失敗ケース、定量的な議論は要旨からは不明

6. 次に読むべき論文は?

- upper-bodyとlower-bodyの制御を分離する従来teleoperation手法(個別論文名は要旨からは不明) - open-loop teleoperationシステムに関する研究 - MoE(Mixture of Experts)を用いたロボティクス学習手法 - MR headsetを用いたteleoperation研究 - humanoid-scene interactionのデータ収集・模倣学習に関する研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yixuan Li, Yutang Lin, Jieming Cui, Tengyu Liu, Wei Liang, Yixin Zhu, Siyuan Huang

分類: cs.RO

原文アブストラクト

Humanoid teleoperation plays a vital role in demonstrating and collecting data for complex humanoid-scene interactions. However, current teleoperation systems face critical limitations: they decouple upper- and lower-body control to maintain stability, restricting natural coordination, and operate open-loop without real-time position feedback, leading to accumulated drift. The fundamental challenge is achieving precise, coordinated whole-body teleoperation over extended durations while maintaining accurate global positioning. Here we show that an MoE-based teleoperation system, CLONE, with closed-loop error correction enables unprecedented whole-body teleoperation fidelity, maintaining minimal positional drift over long-range trajectories using only head and hand tracking from an MR headset. Unlike previous methods that either sacrifice coordination for stability or suffer from unbounded drift, CLONE learns diverse motion skills while preventing tracking error accumulation through real-time feedback, enabling complex coordinated movements such as ``picking up objects from the ground.'' These results establish a new milestone for whole-body humanoid teleoperation for long-horizon humanoid-scene interaction tasks.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI