日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

歩行arXiv:2507.00273

並列駆動ヒューマノイドのための機械的知能を考慮したカリキュラム強化学習

Mechanical Intelligence-Aware Curriculum Reinforcement Learning for Humanoids with Parallel Actuation

シェア:XThreadsFacebookLINEはてブBluesky

並列機構をネイティブにシミュレートするGPU加速MuJoCoを用い、カリキュラム強化学習でBRUCEヒューマノイドの歩行方策を訓練し、MPCより優れた実世界ゼロショット性能を示した。

詳しい要約

1. どんなもの?

- BRUCE という kid-sized humanoid robot を対象に、parallel actuation 機構を考慮した強化学習フレームワークを提案する研究。 - differential pulley、five-bar linkage、four-bar linkage の3種類の parallel mechanisms について一般的な定式化と simulation 手法を示す。 - closed kinematic chains を GPU 加速の MuJoCo (MJX) でネイティブにシミュレートし、end-to-end の curriculum RL で policy を学習する。 - 学習した policy を実機に zero-shot 展開し、MPC と比較評価する。

2. 先行研究と比べてどこがすごい?

- 従来の多くの学習フレームワークは、simulator の closed kinematic chains 対応の制約から parallel actuation の mechanical intelligence を無視していた。 - 先行手法は simplified serial approximations に依存していたが、本研究は closed-chain constraints をネイティブにシミュレートする。 - これによりハードウェアの mechanical nonlinear properties を学習中に保持できる点が新しい。 - 結果として、MPC と比べて surface generalization と実機 zero-shot 性能が向上したと報告している。

3. 技術・手法の肝は?

- differential pulley、five-bar linkage、four-bar linkage の3種類の parallel mechanisms に対する一般的な定式化と simulation 手法を提示。 - GPU 加速の MuJoCo (MJX) を用い、closed-chain constraints を簡略化せずネイティブに扱う。 - parallel-mechanism aware な policy を end-to-end の curriculum RL フレームワークで学習。 - 対象ロボットは kid-sized humanoid の BRUCE。project code も公開されている。

4. どうやって有効だと検証した?

- 提案する RL 手法を model predictive controller (MPC) とベンチマーク比較している。 - 実世界での zero-shot deployment を実施し、性能を評価。 - surface generalization において RL が MPC より良い結果を示したと報告。 - 詳細な評価指標や実験条件は要旨からは不明。

5. 議論はある?

- parallel mechanisms を end-to-end 学習パイプラインで完全にシミュレートすることの計算手法と性能上の利点を強調している。 - 従来の serial approximations が不正確な motion modeling や suboptimal policies を招く可能性を指摘。 - 限界や今後の課題についての具体的な議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で直接参照・比較されている model predictive controller (MPC) に関する研究。 - simplified serial approximations を用いた先行の humanoid locomotion RL 研究。 - MuJoCo (MJX) や closed kinematic chains を扱う simulation 関連の研究。 - 同分野の定番として、legged humanoid の locomotion に対する curriculum RL の一般的な手法。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yusuke Tanaka, Alvin Zhu, Quanyou Wang, Yeting Liu, Dennis Hong

分類: cs.RO

原文アブストラクト

Reinforcement learning (RL) has enabled advances in humanoid robot locomotion, yet most learning frameworks do not account for mechanical intelligence embedded in parallel actuation mechanisms due to limitations in simulator support for closed kinematic chains. This omission can lead to inaccurate motion modeling and suboptimal policies, particularly for robots with high actuation complexity. This paper presents general formulations and simulation methods for three types of parallel mechanisms: a differential pulley, a five-bar linkage, and a four-bar linkage, and trains a parallel-mechanism aware policy through an end-to-end curriculum RL framework for BRUCE, a kid-sized humanoid robot. Unlike prior approaches that rely on simplified serial approximations, we simulate all closed-chain constraints natively using GPU-accelerated MuJoCo (MJX), preserving the hardware's mechanical nonlinear properties during training. We benchmark our RL approach against a model predictive controller (MPC), demonstrating better surface generalization and performance in real-world zero-shot deployment. This work highlights the computational approaches and performance benefits of fully simulating parallel mechanisms in end-to-end learning pipelines for legged humanoids. Project codes with parallel mechanisms: https://github.com/alvister88/og_bruce

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI