日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

歩行arXiv:2510.07094

ロバストな汎用四足歩行ポリシーのためのサンプリング戦略

Sampling Strategies for Robust Universal Quadrupedal Locomotion Policies

シェア:XThreadsFacebookLINEはてブBluesky

四足ロボットの汎用歩行ポリシーを強化学習で訓練する際、物理パラメータと関節PDゲインのサンプリング戦略を比較し、シミュレーションから実機へのゼロショット転移を実現した。

詳しい要約

1. どんなもの?

- 四足歩行ロボット向けの、単一の汎用locomotion policyを強化学習で訓練するためのconfiguration variationのsampling戦略を扱った研究。 - 対象は物理ロボットパラメータとjoint proportional-derivative gainsのsampling。 - 複数のパラメータ構成に汎化する単一policyの獲得を狙う。 - RaiSimで訓練し、多様な四足ロボットのsimulationとANYmal実機へのzero-shot deploymentで評価。

2. 先行研究と比べてどこがすごい?

- 複数のbaseline実装と比較し、robustなsim-to-real gapの閉鎖にはjoint controller gainsの大幅なrandomizationが必要だと示した点。 - joint gain sampling戦略として、mass-to-gainsのlinear/polynomial function mapping、performance-based adaptive filtering、uniform random samplingの3種を比較。 - nominal priorsとreference modelsでconfigurationにbiasをかけ、policyのrobustnessを改善。 - 具体的な先行研究名は要旨からは不明。

3. 技術・手法の肝は?

- 物理ロボットパラメータとjoint PD gainsのconfiguration variationをsamplingして強化学習。 - joint gain samplingは3種: (1) mass-to-gainsのlinearおよびpolynomial function mappingによるparameter sampling、(2) performance-based adaptive filtering、(3) uniform random sampling。 - nominal priorsとreference modelsを用いてconfigurationをbiasし、robustnessを向上。 - 訓練はRaiSim simulation environmentで実施。

4. どうやって有効だと検証した?

- RaiSim上で訓練し、多様な四足ロボット群のsimulationでテスト。 - ANYmal四足ロボットへzero-shot deploymentして実機検証。 - 複数のbaseline実装との比較で有効性を評価。 - 結果として、robustなsim-to-real gap閉鎖にはjoint controller gainsの大幅なrandomizationが必要と示された。

5. 議論はある?

- joint controller gainsの大幅なrandomizationがrobustなsim-to-real gap閉鎖に必要という知見。 - 3種のjoint gain sampling戦略の比較から、sampling設計の重要性が議論される。 - nominal priorsとreference modelsによるbiasの効果が示唆される。 - 具体的な限界や失敗事例は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されているbaseline実装(個別名称は要旨からは不明)。 - 関連手法としてdomain randomization、sim-to-real transfer、ANYmalを用いた強化学習locomotion研究。 - RaiSim simulation environmentを用いた四足ロボットの強化学習研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: David Rytz, Kim Tien Ly, Ioannis Havoutis

分類: cs.RO

原文アブストラクト

This work focuses on sampling strategies of configuration variations for generating robust universal locomotion policies for quadrupedal robots. We investigate the effects of sampling physical robot parameters and joint proportional-derivative gains to enable training a single reinforcement learning policy that generalizes to multiple parameter configurations. Three fundamental joint gain sampling strategies are compared: parameter sampling with (1) linear and polynomial function mappings of mass-to-gains, (2) performance-based adaptive filtering, and (3) uniform random sampling. We improve the robustness of the policy by biasing the configurations using nominal priors and reference models. All training was conducted using the RaiSim simulation environment, tested in simulation on a range of diverse quadrupeds, and zero-shot deployed onto hardware using the ANYmal quadruped robot. Compared to multiple baseline implementations, our results demonstrate the need for significant joint controller gains randomization for robust closing of the sim-to-real gap.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI