日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

遠隔操作arXiv:2609.34233

GAE: リアルタイムヒューマノイド遠隔操作のための汎用行動エキスパート

GAE: General Action Expert for Real-Time Humanoid Teleoperation

シェア:XThreadsFacebookLINEはてブBluesky

多様な人間動作データを活用し、遅延を考慮した予測機構を備えた二段階学習により、ヒューマノイドの全身遠隔操作を低遅延で実現するフレームワークを提案。

詳しい要約

1. どんなもの?

本論文は、人型ロボットの全身テレオペレーションを低遅延で実現する統合学習フレームワーク「General Action Expert (GAE)」を提案する。 - 目的: 人間の身体的プレゼンスを遠隔操作ロボットで拡張し、社会的・サービス・労働活動への参加を可能にする。 - 対象: 多様で動的な全身行動を、応答性の高い人間-ロボット同期の下で実現するテレオペレーション。 - 構成: 大規模人間動作データセットの構築、二段階学習パラダイム、遅延条件付き予測機構。 - 検証: Unitree G1 と Westlake O1 ロボットでのシミュレーションおよび実世界実験。 - 結果: 多様・敏捷・表現豊かな人間行動を滑らかにミラーリング可能。

2. 先行研究と比べてどこがすごい?

先行研究との具体的比較は要旨に明記されていないが、以下の点が特徴として挙げられる。 - 従来のテレオペレーションは特定動作や限定的な全身行動に留まりがちだが、GAEは異種ソースから大規模動作データを構築し汎用性を目指す。 - 人間動作のノイズや身体構造ミスマッチに対し、二段階学習で対処する点が新しい。 - 実時間テレオペレーションにおけるエンドツーエンド遅延を適応的に補償する遅延条件付き予測機構を導入。 - これにより多様で敏捷な行動を低遅延で実現できる点が先行研究と比べて優位と主張。 - ただし、具体的な先行研究名や定量的比較は要旨からは不明。

3. 技術・手法の肝は?

技術の肝は以下の通り。 - 大規模人間動作データセット: 動画、アニメーション、モーションキャプチャなど異種ソースから構築し、標準化と拡張を実施。 - 二段階学習パラダイム: - 第一段階: 特権的生成ポリシーがシミュレーション内で人間動作参照を追従し、実行可能な人型軌道をロールアウト。 - 第二段階: 展開可能な実行ポリシーが、カリキュラムドメインランダム化の下で生成軌道を追従学習。 - 遅延条件付き予測機構: 実時間テレオペレーション中のエンドツーエンド遅延を適応的に補償し、応答性の高い同期を実現。 - これらを統合し、汎用・低遅延の全身テレオペレーションを可能にする。

4. どうやって有効だと検証した?

有効性の検証は以下の方法で行われた。 - シミュレーション実験。 - 実世界実験: Unitree G1 および Westlake O1 ロボットを使用。 - 結果: GAEが多様・敏捷・表現豊かな人間行動を滑らかにミラーリングできることを示した。 - 具体的な評価指標やベースラインとの比較詳細は要旨からは不明。

5. 議論はある?

要旨から読み取れる議論・限界は以下の通り。 - 人間動作のノイズと身体構造ミスマッチへの対処が課題として明示され、二段階学習で解決を図っている。 - 実時間テレオペレーションにおけるエンドツーエンド遅延の補償が重要課題として挙げられている。 - しかし、具体的な限界、失敗事例、計算コスト、汎化性能の議論は要旨からは不明。 - 今後の課題や倫理的影響についても要旨からは不明。

6. 次に読むべき論文は?

要旨で参照・比較されている研究は明記されていないため、同分野の定番として以下を挙げる。 - 人型ロボットの全身テレオペレーションに関する研究(例: モーションキャプチャベースの全身操作、強化学習を用いた全身制御)。 - 遅延補償や予測制御に関する研究(例: テレオペレーションにおける遅延補償手法)。 - 大規模人間動作データセットを活用した模倣学習(例: AMASS, Human3.6M などのデータセットを用いた研究)。 - ドメインランダム化やカリキュラム学習を用いた sim-to-real 転移の研究。 - 具体的な論文名は要旨に無いため、一般名で示した。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yuefan Wang, Huaicheng Zhou, Xiao He, Zhijie He, Mingchuan Yang, Huayi Zhang, Li Chai, Jinxin Liu, Donglin Wang

分類: cs.RO

原文アブストラクト

Humanoid avatars extend human physical presence beyond the body, enabling people to participate in social, service, and labor activities through remotely operated robots. This requires teleoperation systems capable of realizing diverse and dynamic whole-body behaviors while maintaining responsive human-robot synchronization. We present General Action Expert(GAE), a unified learning framework for general-purpose, low-latency humanoid whole-body teleoperation. To cover diverse human behaviors, GAE builds a large-scale human motion dataset from heterogeneous sources, including videos, animations, and motion capture, followed by standardization and augmentation. GAE then addresses the noise and embodiment mismatch in human motions with a two-stage training paradigm: a privileged generator policy first tracks human motion references in simulation and rolls out feasible humanoid trajectories; a deployable executor policy then learns to track these generated trajectories under curriculum domain randomization. For responsive human-robot synchronization, GAE introduces a latency-conditioned anticipation mechanism that adaptively compensates for end-to-end delay during real-time teleoperation. Simulation and real-world experiments on Unitree G1 and Westlake O1 robots demonstrate that GAE enables humanoids to smoothly mirror diverse, agile, and expressive human behaviors. Project website: https://wangyf0928.github.io/gae-wlrobotics/

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI