日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

遠隔操作arXiv:2603.14327

OmniClone: 頑健で万能な全身ヒューマノイド遠隔操作システムの構築

OmniClone: Engineering a Robust, All-Rounder Whole-Body Humanoid Teleoperation System

シェア:XThreadsFacebookLINEはてブBluesky

全身ヒューマノイド遠隔操作システムOmniCloneを提案し、診断ベンチマークOmniBenchを用いて従来手法の弱点を特定し、データレシピとシステム改良によりMPJPEを66%以上削減し、計算資源を大幅に削減した。

詳しい要約

1. どんなもの?

- 全身ヒューマノイドのteleoperationシステム「OmniClone」を提案。 - 単一のconsumer GPUで高忠実度・多技能制御を実現。 - リアルタイム操作、生成モーション再生、VLAモデルを単一のunified policyでサポート。 - 異なる体型のoperatorに汎化。 - 診断ベンチマーク「OmniBench」も導入。

2. 先行研究と比べてどこがすごい?

- 既存システムは集約指標で評価され、失敗モードが隠蔽されていた。 - OmniBenchにより層別化された運動カテゴリと難易度で評価し、先行システムの狭い専門性を露呈。 - 計算資源を桁違いに削減しつつ、MPJPEを66%以上低減。 - 制御ソース非依存で、リアルタイムteleoperation、生成モーション、VLAを単一ポリシーで実現。

3. 技術・手法の肝は?

- 診断に基づく最適化された訓練データレシピ。 - subject-agnostic retargetingとrobust communicationの統合。 - 単一のunified policyで多様な制御ソースに対応。 - 詳細な技術は要旨からは不明。

4. どうやって有効だと検証した?

- OmniBenchで未見モーションに対し層別化評価。 - MPJPEを66%以上低減。 - 計算資源を桁違いに削減。 - 異なる体型のoperatorへの汎化を確認。 - 具体的な実験設定は要旨からは不明。

5. 議論はある?

- 既存評価の集約指標の問題を指摘。 - 診断的粒度の欠如とシステム構成の複雑さが実用展開を妨げると議論。 - robust, versatile, affordableなteleoperationの構築が課題。 - 詳細な議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 同分野の定番として、humanoid teleoperation、VLAモデル、retargeting手法、MPJPE評価に関する論文が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yixuan Li, Le Ma, Yutang Lin, Yushi Du, Mengya Liu, Kaizhe Hu, Jieming Cui, Yixin Zhu, Wei Liang, Baoxiong Jia, Siyuan Huang

分類: cs.RO

原文アブストラクト

Whole-body humanoid teleoperation enables humans to remotely control humanoid robots, serving as both a real-time operational tool and a scalable engine for collecting demonstrations for autonomous learning. Despite recent advances, existing systems are validated using aggregate metrics that conflate distinct motion regimes, masking critical failure modes. This lack of diagnostic granularity, compounded by tightly coupled and labor-intensive system configurations, hinders robust real-world deployment. A key open challenge is building a teleoperation system that is simultaneously robust, versatile, and affordable for practical use. Here we present OmniClone, a whole-body humanoid teleoperation system that achieves high-fidelity, multi-skill control on a single consumer GPU with modest data requirements. Central to our approach is OmniBench, a diagnostic benchmark that evaluates policies across stratified motion categories and difficulty levels on unseen motions, exposing the narrow specialization of prior systems. Guided by these diagnostics, we identify an optimized training data recipe and integrate system-level improvements: subject-agnostic retargeting and robust communication, that collectively reduce Mean Per-Joint Position Error (MPJPE) by over 66% while requiring orders-of-magnitude fewer computational resources than comparable methods. Crucially, OmniClone is control-source-agnostic: a single unified policy supports real-time teleoperation, generated motion playback, and Vision-Language-Action (VLA) models, while generalizing across operators of vastly different body proportions. By uniting diagnostic evaluation with practical engineering, OmniClone provides an accessible foundation for scalable humanoid teleoperation and autonomous learning.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI