日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

歩行arXiv:2604.19102

選択的敵対的動作事前分布を用いたヒューマノイドロボットのマルチ歩容学習

Multi-Gait Learning for Humanoid Robots Using Reinforcement Learning with Selective Adversarial Motion Prior

シェア:XThreadsFacebookLINEはてブBluesky

ヒューマノイドロボットが歩行、行進、走行、階段昇降、跳躍の5つの歩容を統一的な強化学習フレームワークで習得する手法を提案。安定性重視の歩容にはAMPを適用し、動的歩容には適用しない選択的AMP戦略により、全歩容で性能が向上することを示した。

詳しい要約

1. どんなもの?

- 人型ロボットの多様な歩容を単一の強化学習フレームワークで学習する手法。 - 5種類の歩容(walking, goose-stepping, running, stair climbing, jumping)を同一のポリシー構造、行動空間、報酬設計で習得。 - 選択的Adversarial Motion Prior (AMP) を導入し、安定性重視の歩容にはAMPを適用、動的歩容には適用しない。 - シミュレーションでPPOとdomain randomizationを用いて訓練し、12-DOF人型ロボットにzero-shot sim-to-real転移。

2. 先行研究と比べてどこがすごい?

- 従来のAMPは全歩容に一律適用され、動的歩容では過剰な制約となる問題があった。 - 選択的AMPにより、安定性重視の歩容では収束加速と異常行動抑制を実現し、動的歩容では敏捷性を維持。 - 一様AMPポリシーと比較して、全5歩容で高速収束、低追従誤差、高成功率を達成。

3. 技術・手法の肝は?

- 選択的Adversarial Motion Prior (AMP) 戦略:周期的で安定性が重要な歩容(walking, goose-stepping, stair climbing)にAMPを適用し、動的歩容(running, jumping)では意図的に省略。 - PPOによる強化学習とdomain randomizationをシミュレーションで実施。 - 同一のポリシー構造、行動空間、報酬定式化を全歩容で共有。 - zero-shot sim-to-real転移により実機12-DOF人型ロボットに展開。

4. どうやって有効だと検証した?

- シミュレーションで訓練後、実機12-DOF人型ロボットにzero-shot転移。 - 定量的比較により、選択的AMPが一様AMPポリシーより全5歩容で優れることを示す。 - 具体的には、安定性重視歩容で高速収束、低追従誤差、高成功率を達成し、動的歩容の敏捷性を犠牲にしない。

5. 議論はある?

- 選択的AMPの有効性は示されたが、他の歩容やロボットへの一般化可能性は要旨からは不明。 - AMPを適用する歩容の選択基準や、動的歩容でのAMP省略の限界については議論されていない。 - 実機実験の詳細な条件や安全性評価は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:Adversarial Motion Prior (AMP)、PPO、domain randomization、zero-shot sim-to-real transfer。 - 関連手法:uniform AMP policy。 - 同分野の定番:DeepMimic、Mocap-based reinforcement learning for locomotion。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yuanye Wu, Keyi Wang, Linqi Ye, Boyang Xing

分類: cs.RO, cs.AI

原文アブストラクト

Learning diverse locomotion skills for humanoid robots in a unified reinforcement learning framework remains challenging due to the conflicting requirements of stability and dynamic expressiveness across different gaits. We present a multi-gait learning approach that enables a humanoid robot to master five distinct gaits -- walking, goose-stepping, running, stair climbing, and jumping -- using a consistent policy structure, action space, and reward formulation. The key contribution is a selective Adversarial Motion Prior (AMP) strategy: AMP is applied to periodic, stability-critical gaits (walking, goose-stepping, stair climbing) where it accelerates convergence and suppresses erratic behavior, while being deliberately omitted for highly dynamic gaits (running, jumping) where its regularization would over-constrain the motion. Policies are trained via PPO with domain randomization in simulation and deployed on a physical 12-DOF humanoid robot through zero-shot sim-to-real transfer. Quantitative comparisons demonstrate that selective AMP outperforms a uniform AMP policy across all five gaits, achieving faster convergence, lower tracking error, and higher success rates on stability-focused gaits without sacrificing the agility required for dynamic ones.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI