日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

遠隔操作arXiv:2602.09628

TeleGate: モーション事前分布とゲート付きエキスパート選択による全身ヒューマノイド遠隔操作

TeleGate: Whole-Body Humanoid Teleoperation via Gated Expert Selection with Motion Prior

シェア:XThreadsFacebookLINEはてブBluesky

複数の専門家ポリシーを蒸留せずにゲートネットワークで動的に選択し、VAEベースの運動事前分布で将来の動きを予測することで、ヒューマノイドの全身遠隔操作を高精度に実現した。

詳しい要約

1. どんなもの?

- 人形ロボットの全身テレオペレーションをリアルタイムで行う統合フレームワーク「TeleGate」を提案。 - 複数の専門家ポリシーを蒸留せず、ゲーティングネットワークで動的に選択・活性化する。 - VAEベースのmotion priorで将来の参照軌道を予測し、跳躍や立ち上がりなどの予測が必要な動作に対応。 - Unitree G1に実装し、2.5時間のmotion captureデータのみで訓練。 - 走行、転倒回復、跳躍などの多様な動的動作で高精度な追従を実現。

2. 先行研究と比べてどこがすごい?

- 既存手法は複数の専門家ポリシーを単一の一般ポリシーに蒸留し、動的動作で性能劣化が生じる問題があった。 - TeleGateは蒸留を行わず、専門家ポリシーの能力を完全に保持したままゲーティングで選択するため、性能劣化を回避。 - リアルタイムテレオペレーションで将来の参照軌道が得られない問題に対し、motion priorで暗黙的な将来意図を抽出し予測制御を可能にした点が新しい。 - ベースライン手法と比較して追従精度と成功率で大幅に優れる。

3. 技術・手法の肝は?

- 軽量なgating networkを訓練し、固有受容感覚状態と参照軌道に基づいて専門家ポリシーをリアルタイムで動的に活性化。 - VAEベースのmotion priorモジュールを導入し、履歴観測から将来の動作意図を抽出。 - これにより跳躍や立ち上がりなど予測を要する動作で先読み制御を実現。 - 専門家ポリシーはドメイン特化型で、蒸留せずにそのまま保持。 - 全体として統合された全身テレオペレーションフレームワークを構成。

4. どうやって有効だと検証した?

- シミュレーションで実証評価を実施。 - Unitree G1人形ロボットに実装して実機展開。 - 2.5時間のmotion captureデータのみで訓練。 - 走行、転倒回復、跳躍などの多様な動的動作で高精度リアルタイムテレオペレーションを達成。 - ベースライン手法と比較し、追従精度と成功率で有意に優れることを確認。

5. 議論はある?

- 要旨からは不明。 - ただし、蒸留による性能劣化を回避するアプローチの有効性が示唆される。 - ゲーティングネットワークの汎化性能や、未知の動作への対応については言及されていない。 - 実機展開における安全性やロバスト性に関する議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として、専門家ポリシーの蒸留(knowledge distillation)や、motion priorを用いた予測制御、人形ロボットの全身テレオペレーションに関する研究が挙げられる。 - 同分野の定番として、DeepMimicやAMP(Adversarial Motion Priors)などのmotion imitation手法、またUnitree G1を用いた研究が参考になる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jie Li, Bing Tang, Feng Wu

分類: cs.RO

原文アブストラクト

Real-time whole-body teleoperation is a critical method for humanoid robots to perform complex tasks in unstructured environments. However, developing a unified controller that robustly supports diverse human motions remains a significant challenge. Existing methods typically distill multiple expert policies into a single general policy, which often inevitably leads to performance degradation, particularly on highly dynamic motions. This paper presents TeleGate, a unified whole-body teleoperation framework for humanoid robots that achieves high-precision tracking across various motions while avoiding the performance loss inherent in knowledge distillation. Our key idea is to preserve the full capability of domain-specific expert policies by training a lightweight gating network, which dynamically activates experts in real-time based on proprioceptive states and reference trajectories. Furthermore, to compensate for the absence of future reference trajectories in real-time teleoperation, we introduce a VAE-based motion prior module that extracts implicit future motion intent from historical observations, enabling anticipatory control for motions requiring prediction such as jumping and standing up. We conducted empirical evaluations in simulation and also deployed our technique on the Unitree G1 humanoid robot. Using only 2.5 hours of motion capture data for training, our TeleGate achieves high-precision real-time teleoperation across diverse dynamic motions (e.g., running, fall recovery, and jumping), significantly outperforming the baseline methods in both tracking accuracy and success rate.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI