日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

全身制御arXiv:2606.04829

M3imic: 多様な動作模倣のための汎用全身制御器の学習

M3imic: Learning a Versatile Whole-Body Controller for Multimodal Motion Mimicking

シェア:XThreadsFacebookLINEはてブBluesky

ヒューマノイドロボットの全身制御を目的に、関節角度やエンドエフェクタ位置など異なる動作参照モダリティを統一するフレームワークを提案し、シミュレーションと実機で汎用性を実証した。

詳しい要約

1. どんなもの?

- 人形ロボットの多様な全身運動を実現する汎用コントローラ。 - 異なる運動参照モダリティ(関節角度、人間姿勢軌跡、エンドエフェクタ姿勢)を統合。 - モダリティ固有のエンコーダで共有潜在空間にマッピング。 - 単一ポリシーで複数モダリティに対応し、再学習不要でsim-to-real転移。 - Unitree G1ロボットで評価。

2. 先行研究と比べてどこがすごい?

- 既存手法は密な関節角度と疎なエンドエフェクタ姿勢の表現ミスマッチを無視。 - 本手法は異種モダリティを統合し、単一ポリシーで対応。 - モダリティ固有の再学習が不要で、汎用性が高い。 - 未見テストデータで98.42%の成功率を達成。

3. 技術・手法の肝は?

- モダリティ固有のエンコーダで異種参照を共有潜在空間にマッピング。 - 大規模強化学習をシミュレータで実施し、単一ポリシーを訓練。 - モダリティに依存しないポリシーでsim-to-real転移を実現。 - 関節角度、人間姿勢、エンドエフェクタ姿勢を統一表現。

4. どうやって有効だと検証した?

- シミュレーションと実世界実験をUnitree G1で実施。 - 未見テストデータセットでピーク成功率98.42%を達成。 - 優れた汎化能力を実証。 - コード公開: https://github.com/Renforce-Dynamics/MultiModalWBC

5. 議論はある?

- 要旨からは不明。 - 限界や課題についての言及はない。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 同分野の定番として、強化学習ベースの全身制御(例: DeepMimic, AMP)やsim-to-real転移手法が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zuxing Lu, Ziang Zheng, Yao Lyu, Jingyu Liu, Feihong Zhang, Song Lu, Xin Yuan, Changyin Sun, Xingxing Zuo, Shengbo Eben Li

分類: cs.RO

原文アブストラクト

Building a general-purpose whole-body controller is essential for enabling diverse motion capabilities in humanoid robots across a wide range of downstream tasks, including locomotion and loco-manipulation. Different tasks rely on distinct motion reference modalities: locomotion primarily depends on coordinated robot joint trajectories, whereas manipulation requires precise end-effector trajectory tracking. Existing methods often overlook the representational mismatch between dense robot joint angles and sparse end-effector poses. To address this, we propose Multi-Modal Mimic (M3imic), a versatile multi-modal whole-body control framework that unifies heterogeneous motion reference modalities, including robot joint angles, human pose trajectories, and end-effector poses, using modality-specific encoders to map them into a shared latent space. Leveraging large-scale reinforcement learning in the simulator, we train a single policy that achieves sim-to-real transfer across multiple motion reference modalities without modality-specific retraining. Extensive simulation and real-world experiments on the Unitree G1 robot are conducted to evaluate the proposed framework. In simulation, the policy achieves a peak success rate of 98.42\% on an unseen test dataset, demonstrating its exceptional generalization capability. The code is available at https://github.com/Renforce-Dynamics/MultiModalWBC

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI