日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ロコマニピュレーションarXiv:2510.05070

ResMimic: 汎用モーショントラッキングから残差学習によるヒューマノイド全身ロコマニピュレーションへ

ResMimic: From General Motion Tracking to Humanoid Whole-body Loco-Manipulation via Residual Learning

シェア:XThreadsFacebookLINEはてブBluesky

大規模な人間モーションデータで訓練した汎用モーショントラッキング方策を土台に、残差方策を学習させて物体とのインタラクションを伴うヒューマノイドの全身移動操作を実現した研究。

詳しい要約

1. どんなもの?

- ヒューマノイドの whole-body loco-manipulation を対象とした二段階の residual learning フレームワーク ResMimic を提案する研究。 - 第一段階で大規模な human-only motion で学習した general motion tracking (GMT) policy を task-agnostic な基盤として用いる。 - 第二段階で効率的かつ精密な residual policy を学習し、GMT 出力を補正して locomotion 改善と物体 interaction を組み込む。 - シミュレーションと実機 Unitree G1 humanoid で評価している。

2. 先行研究と比べてどこがすごい?

- 近年の general motion tracking (GMT) は多様な人間動作の再現を可能にしたが、loco-manipulation に必要な精度と物体認識を欠く。 - ResMimic は GMT を土台に residual learning で補正することで、人間らしい全身運動を保ちつつ物体 interaction を扱える点が特徴。 - 要旨では task success、training efficiency、robustness で strong baselines を上回ると報告。 - 具体的な比較対象名は要旨からは不明。

3. 技術・手法の肝は?

- 二段階構成: 第一段階は human-only motion で学習した GMT policy、第二段階はその出力を精緻化する residual policy。 - 効率的な学習のため次の3つを設計。 - point-cloud-based object tracking reward: 最適化を滑らかにする。 - contact reward: humanoid と物体の正確な interaction を促す。 - curriculum-based virtual object controller: 学習初期を安定化させる。 - residual policy は GMT 出力を補正し locomotion 改善と物体 interaction を統合する。

4. どうやって有効だと検証した?

- シミュレーションと実機 Unitree G1 humanoid の両方で評価。 - task success、training efficiency、robustness の観点で strong baselines に対し大きな改善を報告。 - 具体的なタスク設定・指標・被験者数などの詳細は要旨からは不明。 - 動画は https://resmimic.github.io/ で公開。

5. 議論はある?

- 要旨からは不明。 - 想定される論点として、GMT への依存性、residual policy の汎化性、実機での安全性、contact reward の設計感度などが考えられるが、要旨には明記されていない。

6. 次に読むべき論文は?

- 要旨で参照/比較されている general motion tracking (GMT) の研究。 - residual learning を用いた humanoid control の関連研究。 - point-cloud-based object tracking reward や contact reward を用いる loco-manipulation 研究。 - curriculum-based virtual object controller に関連する curriculum learning 研究。 - 具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Siheng Zhao, Yanjie Ze, Yue Wang, C. Karen Liu, Pieter Abbeel, Guanya Shi, Rocky Duan

分類: cs.RO, cs.LG

原文アブストラクト

Humanoid whole-body loco-manipulation promises transformative capabilities for daily service and warehouse tasks. While recent advances in general motion tracking (GMT) have enabled humanoids to reproduce diverse human motions, these policies lack the precision and object awareness required for loco-manipulation. To this end, we introduce ResMimic, a two-stage residual learning framework for precise and expressive humanoid control from human motion data. First, a GMT policy, trained on large-scale human-only motion, serves as a task-agnostic base for generating human-like whole-body movements. An efficient but precise residual policy is then learned to refine the GMT outputs to improve locomotion and incorporate object interaction. To further facilitate efficient training, we design (i) a point-cloud-based object tracking reward for smoother optimization, (ii) a contact reward that encourages accurate humanoid body-object interactions, and (iii) a curriculum-based virtual object controller to stabilize early training. We evaluate ResMimic in both simulation and on a real Unitree G1 humanoid. Results show substantial gains in task success, training efficiency, and robustness over strong baselines. Videos are available at https://resmimic.github.io/ .

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI