日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

進化戦略arXiv:1912.05239

現代の神経進化戦略による連続制御最適化の有効性

Efficacy of Modern Neuro-Evolutionary Strategies for Continuous Control Optimization

シェア:XThreadsFacebookLINEはてブBluesky

多様な連続制御ベンチマークで神経進化手法を評価し、OpenAI-ESが最も有効でパラメータ数や問題複雑度に対してスケールし、ハイパーパラメータにも頑健であることを示した。また強化学習用報酬関数が進化戦略には必ずしも有効でないことを明らかにした。

著者: Paolo Pagliuca, Nicola Milano, Stefano Nolfi

分類: cs.NE, cs.LG, cs.RO

原文アブストラクト

We analyze the efficacy of modern neuro-evolutionary strategies for continuous control optimization. Overall, the results collected on a wide variety of qualitatively different benchmark problems indicate that these methods are generally effective and scale well with respect to the number of parameters and the complexity of the problem. Moreover, they are relatively robust with respect to the setting of hyper-parameters. The comparison of the most promising methods indicates that the OpenAI-ES algorithm outperforms or equals the other algorithms on all considered problems. Moreover, we demonstrate how the reward functions optimized for reinforcement learning methods are not necessarily effective for evolutionary strategies and vice versa. This finding can lead to reconsideration of the relative efficacy of the two classes of algorithm since it implies that the comparisons performed to date are biased toward one or the other class.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI