日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

歩行arXiv:2601.11143

油圧駆動型大型四足歩行ロボットのためのアクチュエータモデルを用いた強化学習

Learning Quadrupedal Locomotion for a Heavy Hydraulic Robot Using an Actuator Model

シェア:XThreadsFacebookLINEはてブBluesky

油圧アクチュエータの解析モデルを構築し、300kg超の大型四足ロボットの歩行制御を強化学習で実現、シミュレーションから実機への転移に成功した。

詳しい要約

1. どんなもの?

- 大型油圧四脚ロボットのための強化学習(RL)による歩行制御 - 300kg超の油圧四脚ロボットへのsim-to-real転移 - アクチュエータモデルを用いたRLポリシーの学習 - 安定かつロバストなコマンド追従歩行を実現

2. 先行研究と比べてどこがすごい?

- 従来の油圧ロボットのsim-to-realは制御応答の遅さと複雑な流体力学が課題 - 複数の相互接続シリンダ構造と流量差により詳細シミュレーションが困難 - ニューラルネットワークベースのアクチュエータモデルと比較し、データ制限下で優位性を実証 - 重量油圧四脚ロボットでのRLによる安定歩行転移は初の試み

3. 技術・手法の肝は?

- 油圧動力学に基づく解析的アクチュエータモデルを提案 - 12個の全アクチュエータの関節トルクを1マイクロ秒未満で予測 - RL環境での高速処理を可能にする - 複雑なアクチュエータを表現し、詳細シミュレーションを回避

4. どうやって有効だと検証した?

- 提案モデルをニューラルネットワークベースのアクチュエータモデルと比較 - データ制限シナリオでの優位性を確認 - RLで学習した歩行ポリシーを300kg超の油圧四脚ロボットに実装 - 安定かつロバストなコマンド追従歩行の転移に成功

5. 議論はある?

- 油圧ロボットのsim-to-realにおける課題を解決 - 解析的モデルの有効性を示す - データ制限下での性能優位性を議論 - 重量油圧四脚ロボットへのRL適用の可能性を提示

6. 次に読むべき論文は?

- ニューラルネットワークベースのアクチュエータモデルに関する研究 - 油圧四脚ロボットのsim-to-real転移に関する研究 - 強化学習を用いた歩行制御の研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Minho Lee, Hyeonseok Kim, Jin Tak Kim, Sangshin Park, Jeong Hyun Lee, Jungsan Cho, Jemin Hwangbo

分類: cs.RO, cs.AI

原文アブストラクト

The simulation-to-reality (sim-to-real) transfer of large-scale hydraulic robots presents a significant challenge in robotics because of the inherent slow control response and complex fluid dynamics. The complex dynamics result from the multiple interconnected cylinder structure and the difference in fluid rates of the cylinders. These characteristics complicate detailed simulation for all joints, making it unsuitable for reinforcement learning (RL) applications. In this work, we propose an analytical actuator model driven by hydraulic dynamics to represent the complicated actuators. The model predicts joint torques for all 12 actuators in under 1 microsecond, allowing rapid processing in RL environments. We compare our model with neural network-based actuator models and demonstrate the advantages of our model in data-limited scenarios. The locomotion policy trained in RL with our model is deployed on a hydraulic quadruped robot, which is over 300 kg. This work is the first demonstration of a successful transfer of stable and robust command-tracking locomotion with RL on a heavy hydraulic quadruped robot, demonstrating advanced sim-to-real transferability.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI