日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

跳躍/強化学習arXiv:2609.15447

バネ脚付きクアッドコプターのエネルギー効率良いターゲットホッピングのための受動ダイナミクス活用学習

Learning to Exploit Passive Dynamics for Energy-Efficient Target Hopping of a Spring-Legged Quadcopter

シェア:XThreadsFacebookLINEはてブBluesky

バネ脚付き単脚クアッドコプターの跳躍制御において、状態からモーターへ直接指令するPPO方策を学習させ、PID制御と比べ消費電力を30.7%削減しつつ再現性の高い跳躍を実現した。

詳しい要約

1. どんなもの?

- 対象は spring-legged quadcopter の target hopping - 単脚型 quadcopter が複雑地形を移動するための制御 - 提案は direct estimated-state-to-motor の PPO policy - 4つの motor を直接指令 - 明示的な hopping state machine や低レベル attitude PID を使わない - 目的は energy-efficient な target hopping - 受動ダイナミクスを活用しつつ、指令高さへの反復可能な hopping を狙う

2. 先行研究と比べてどこがすごい?

- 従来は heuristic PID tuning が主流 - active thrust と passive contact dynamics の協調が制限される - 提案は PID ベース制御スタックと比較して - cycle-averaged measured electrical power を 30.7% 削減 - mean total normalized thrust を 49.8% 削減 - さらに repeatable commanded-height hopping を維持 - landings がより集中 - 受動ダイナミクスの利用改善と電気的 demand 低減に整合する観察

3. 技術・手法の肝は?

- direct estimated-state-to-motor の PPO policy - 4 motor を直接指令し、hopping state machine や低レベル attitude PID を排除 - reward は Energy-Manifold Shaping と Efficiency Shaping の組合せ - Energy-Manifold Shaping: mass-normalized vertical-energy tracking と apex-state anchoring - Efficiency Shaping: history-aware power estimator を用い、general power use を罰則化 - 追加で airborne-power cost と airborne near-stationarity への罰則 - これにより active thrust と passive contact dynamics の協調を学習

4. どうやって有効だと検証した?

- representative hardware runs で検証 - PPO-based control stack と tuned PID-based control stack を比較 - cycle-averaged measured electrical power が 30.7% 減少 - mean total normalized thrust が 49.8% 減少 - 同時に repeatable commanded-height hopping を維持 - landings がより集中することを確認

5. 議論はある?

- 観察は passive dynamics の利用改善と measured electrical demand の低減に整合 - ただし要旨からは、限界や失敗事例、一般化可能性、シミュレーションとのギャップ、安全性、長期耐久性についての議論は不明 - 比較は tuned PID-based control stack に対してのみ - 他の learning-based 手法や model-based 手法との比較は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究: tuned PID-based control stack - 関連手法として挙げられている要素: Proximal Policy Optimization (PPO), Energy-Manifold Shaping, Efficiency Shaping, history-aware power estimator - 同分野の定番として次に読むべき候補: monopedal quadcopter の hopping control, spring-loaded hopping robot の energy-efficient locomotion, PPO を用いた legged/aerial robot control, passive dynamics を活用する robot locomotion に関する研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ruigang Chen, Qi Zhang, Zhicheng Zhong, Zhuorui Yun, Yizhar Or, Mingyi Liu

分類: cs.RO

原文アブストラクト

Combining aerial thrust with spring-loaded hopping makes monopedal quadcopters promising for locomotion over complex terrain, but heuristic proportional-integral-derivative (PID) tuning limits coordination between active thrust and passive contact dynamics. We present a direct estimated-state-to-motor Proximal Policy Optimization (PPO) policy that commands four motors without an explicit hopping state machine or low-level attitude PID. Its reward combines Energy-Manifold Shaping for mass-normalized vertical-energy tracking and apex-state anchoring with Efficiency Shaping, which uses a history-aware power estimator to penalize general power use, impose an additional airborne-power cost, and penalize airborne near-stationarity. In representative hardware runs, the PPO-based control stack reduced cycle-averaged measured electrical power by 30.7% and mean total normalized thrust by 49.8% relative to the tuned PID-based control stack, while retaining repeatable commanded-height hopping and more concentrated landings. These observations are consistent with improved use of passive dynamics and reduced measured electrical demand.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI