日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

歩行arXiv:2509.18046

HuMam: Mambaを用いたエンドツーエンド深層強化学習によるヒューマノイド運動制御

HuMam: Humanoid Motion Control via End-to-End Deep Reinforcement Learning with Mamba

シェア:XThreadsFacebookLINEはてブBluesky

Mambaエンコーダで状態・足先目標・位相クロックを融合し、ヒューマノイド歩行をエンドツーエンド強化学習で制御する手法を提案。学習効率・安定性・省エネ性を向上。

詳しい要約

1. どんなもの?

- ヒューマノイドのlocomotionを対象としたend-to-end強化学習(RL)フレームワーク「HuMam」 - 単層のMamba encoderで、robot-centric states・oriented footstep targets・continuous phase clockを融合 - policyはjoint position targetsを出力し、低レベルPD loopで追従、PPOで最適化 - JVRC-1 humanoidをmc-mujoco上で評価

2. 先行研究と比べてどこがすごい?

- 従来のend-to-end humanoid RLはtraining instability、非効率なfeature fusion、高いactuation costに悩む - HuMamは強いfeedforward baselineに対しlearning efficiency・training stability・task performanceを一貫して改善 - power consumptionとtorque peaksを削減 - 著者らの知る限り、Mambaをfusion backboneに採用した初のend-to-end humanoid RL controller

3. 技術・手法の肝は?

- 単層Mamba encoderによるstate-centricな融合が肝 - 入力はrobot-centric states、oriented footstep targets、continuous phase clock - 出力はjoint position targets、低レベルPD loopで追従 - 最適化はPPO - 6項からなる簡潔なrewardでcontact quality、swing smoothness、foot placement、posture、body stabilityを均衡させ、間接的にenergy savingを促す

4. どうやって有効だと検証した?

- JVRC-1 humanoidをmc-mujoco上で評価 - 強いfeedforward baselineと比較し、learning efficiency・training stability・overall task performanceの改善を確認 - power consumptionとtorque peaksの低減も報告 - 具体的な指標・実験設定の詳細は要旨からは不明

5. 議論はある?

- Mambaをfusion backboneに用いる初のend-to-end humanoid RL controllerとして、efficiency・stability・control economyの実利的改善を主張 - 限界・失敗事例・ablationの詳細は要旨からは不明 - 単一環境(JVRC-1/mc-mujoco)での検証であり、実機や他humanoidへの一般化は要旨からは不明

6. 次に読むべき論文は?

- 比較対象のfeedforward baseline(具体的名称は要旨からは不明) - Mamba(状態空間モデル)に関する原論文 - PPO( Schulman et al. ) - JVRC-1 humanoidおよびmc-mujoco - humanoid locomotion向けend-to-end RLの代表的手法(例: teacher-student型やprivileged learning系の定番研究)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yinuo Wang, Yuanyang Qi, Jinzhao Zhou, Pengxiang Meng, Xiaowen Tao

分類: cs.RO, cs.AI, cs.ET, cs.SY, eess.SP, eess.SY

原文アブストラクト

End-to-end reinforcement learning (RL) for humanoid locomotion is appealing for its compact perception-action mapping, yet practical policies often suffer from training instability, inefficient feature fusion, and high actuation cost. We present HuMam, a state-centric end-to-end RL framework that employs a single-layer Mamba encoder to fuse robot-centric states with oriented footstep targets and a continuous phase clock. The policy outputs joint position targets tracked by a low-level PD loop and is optimized with PPO. A concise six-term reward balances contact quality, swing smoothness, foot placement, posture, and body stability while implicitly promoting energy saving. On the JVRC-1 humanoid in mc-mujoco, HuMam consistently improves learning efficiency, training stability, and overall task performance over a strong feedforward baseline, while reducing power consumption and torque peaks. To our knowledge, this is the first end-to-end humanoid RL controller that adopts Mamba as the fusion backbone, demonstrating tangible gains in efficiency, stability, and control economy.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI