日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

sim2realarXiv:2505.12222

セントロイド速度報酬とsim-to-real技術による衝撃の大きい回転運動の学習:片脚ホッパーの前方宙返り事例研究

Learning Impact-Rich Rotational Maneuvers via Centroidal Velocity Rewards and Sim-to-Real Techniques: A One-Leg Hopper Flip Case Study

シェア:XThreadsFacebookLINEはてブBluesky

セントロイド角速度報酬とアクチュエータ制約を考慮したsim-to-real手法を提案し、片脚ホッパーで前方宙返りを実機で初めて成功させた。

詳しい要約

1. どんなもの?

- 本研究は、前転(front flip)のような大きな角運動量生成と強い衝撃力を伴う動的rotational maneuverを強化学習とsim-to-realで獲得・実機展開するための汎用フレームワークを提案する。 - 対象はone-leg hopperのfront flipを代表ケーススタディとし、実機でのfull front flip実現を報告する。 - 中核はcentroidal velocity-based rewardsとactuator-aware sim-to-real techniques。

2. 先行研究と比べてどこがすごい?

- 従来のlink-level reward formulationsでは真のwhole-body rotationを誘導できないと指摘し、系全体の回転ダイナミクスを捉えるcentroidal angular velocity rewardを導入した点が差分。 - 極端条件下のsim-to-real gapに対し、motor operating regions (MOR)のモデル化とtransmission load regularizationを組み合わせる点が特徴。 - 著者らはone-leg hopperのfull front flipを実機で初めて成功させたと主張。

3. 技術・手法の肝は?

- centroidal angular velocity rewardにより、link単位ではなく系全体の回転運動を直接評価する報酬設計を採用。 - sim-to-real向けにmotor operating regions (MOR)をモデル化し、transmission load regularizationを適用して現実的なtorque commandと機械的堅牢性を確保。 - 強化学習とsim-to-real techniquesを統合したフレームワークとして、impact-richかつrotation-intensiveなbehaviorの学習・展開を狙う。

4. どうやって有効だと検証した?

- one-leg hopperのfront flipをケーススタディとし、実機でfull front flipを実現したと報告。 - 結果から、centroidal dynamicsとactuator constraintsの組み込みが高ダイナミック動作の信頼性に重要だと示す。 - 補足動画(https://youtu.be/atMAVI4s1RY)が提供されている。定量的比較の詳細は要旨からは不明。

5. 議論はある?

- conventional link-level reward formulationsの限界と、centroidal dynamics導入の必要性を議論。 - 極端条件下のsim-to-real gapに対し、MORとtransmission load regularizationの重要性を主張。 - 限界・失敗事例・一般化可能性についての具体的議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で直接参照・比較されている個別論文は明示されていない。 - 関連手法として、centroidal dynamicsに基づくreward設計、motor operating regions (MOR)、transmission load regularization、sim-to-real transfer、one-leg hopperの動的 maneuver に関する研究を次に読む候補として挙げる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Dongyun Kang, Gijeong Kim, JongHun Choe, Hajun Kim, Hae-Won Park

分類: cs.RO

原文アブストラクト

Dynamic rotational maneuvers, such as front flips, inherently involve large angular momentum generation and intense impact forces, presenting major challenges for reinforcement learning and sim-to-real transfer. In this work, we propose a general framework for learning and deploying impact-rich, rotation-intensive behaviors through centroidal velocity-based rewards and actuator-aware sim-to-real techniques. We identify that conventional link-level reward formulations fail to induce true whole-body rotation and introduce a centroidal angular velocity reward that accurately captures system-wide rotational dynamics. To bridge the sim-to-real gap under extreme conditions, we model motor operating regions (MOR) and apply transmission load regularization to ensure realistic torque commands and mechanical robustness. Using the one-leg hopper front flip as a representative case study, we demonstrate the first successful hardware realization of a full front flip. Our results highlight that incorporating centroidal dynamics and actuator constraints is critical for reliably executing highly dynamic motions. A supplementary video is available at: https://youtu.be/atMAVI4s1RY

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI