日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

歩行arXiv:2602.06445

ECO: ヒューマノイド歩行のためのエネルギー制約付き強化学習最適化

ECO: Energy-Constrained Optimization with Reinforcement Learning for Humanoid Walking

シェア:XThreadsFacebookLINEはてブBluesky

エネルギー消費を報酬から切り離し明示的な不等式制約として扱う制約付き強化学習フレームワークECOを提案し、ヒューマノイドBRUCEで省エネかつ安定した歩行を実現した。

詳しい要約

1. どんなもの?

- 人形ロボットの歩行制御において、エネルギー効率と安定性を両立する制約付き強化学習フレームワークECOを提案。 - エネルギー関連指標を報酬から分離し、明示的な不等式制約として再定式化。 - エネルギー消費と参照動作に対する専用制約をLagrangian法で強制。 - kid-sized humanoid robot BRUCEを用いてsim-to-simおよびsim-to-real転移を検証。

2. 先行研究と比べてどこがすごい?

- 既存のMPCやRLはエネルギー指標を多目的最適化の報酬に埋め込み、ハイパーパラメータ調整が煩雑で準最適政策になりがち。 - ECOはエネルギーコストを制約として明示的に扱うことで、解釈可能で直感的な調整を可能に。 - 標準RL(報酬整形)や4つの最先端制約付きRL手法と比較し、エネルギー消費を大幅削減しつつ安定歩行を維持。

3. 技術・手法の肝は?

- 制約付きRLフレームワークECOを提案。 - エネルギー関連指標を報酬から分離し、不等式制約として再定式化。 - エネルギー消費と参照動作に対する専用制約を導入。 - Lagrangian法により制約を強制し、安定・対称・省エネ歩行を実現。

4. どうやって有効だと検証した?

- MPC、標準RL(報酬整形)、4つの最先端制約付きRL手法と比較評価。 - kid-sized humanoid robot BRUCEを用いたsim-to-simおよびsim-to-real転移実験を実施。 - ECOがベースラインと比べてエネルギー消費を大幅に削減しつつ、堅牢な歩行性能を維持することを示した。 - 実験デモはプロジェクトウェブサイトで公開。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:MPC、標準RL with reward shaping、4つのstate-of-the-art constrained RL methods。 - 関連手法:Lagrangian method。 - 同分野の定番:humanoid locomotion、constrained reinforcement learning。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Weidong Huang, Jingwen Zhang, Jiongye Li, Shibowen Zhang, Jiayang Wu, Jiayi Wang, Hangxin Liu, Yaodong Yang, Yao Su

分類: cs.RO

原文アブストラクト

Achieving stable and energy-efficient locomotion is essential for humanoid robots to operate continuously in real-world applications. Existing MPC and RL approaches often rely on energy-related metrics embedded within a multi-objective optimization framework, which require extensive hyperparameter tuning and often result in suboptimal policies. To address these challenges, we propose ECO (Energy-Constrained Optimization), a constrained RL framework that separates energy-related metrics from rewards, reformulating them as explicit inequality constraints. This method provides a clear and interpretable physical representation of energy costs, enabling more efficient and intuitive hyperparameter tuning for improved energy efficiency. ECO introduces dedicated constraints for energy consumption and reference motion, enforced by the Lagrangian method, to achieve stable, symmetric, and energy-efficient walking for humanoid robots. We evaluated ECO against MPC, standard RL with reward shaping, and four state-of-the-art constrained RL methods. Experiments, including sim-to-sim and sim-to-real transfers on the kid-sized humanoid robot BRUCE, demonstrate that ECO significantly reduces energy consumption compared to baselines while maintaining robust walking performance. These results highlight a substantial advancement in energy-efficient humanoid locomotion. All experimental demonstrations can be found on the project website: https://sites.google.com/view/eco-humanoid.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI