日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

強化学習arXiv:2108.10392

サンプル系に対する一般化スタック強化学習法

A generalized stacked reinforcement learning method for sampled systems

シェア:XThreadsFacebookLINEはてブBluesky

サンプル・アンド・ホールドを含むサンプル系に適した強化学習法を提案し、モデル予測制御とQ・価値関数学習を組み合わせて移動ロボットで性能を比較した論文。

著者: Pavel Osinenko, Dmitrii Dobriborsci, Grigory Yaremenko, Georgiy Malaniya

分類: cs.RO, cs.SY, eess.SY, math.DS

原文アブストラクト

A common setting of reinforcement learning (RL) is a Markov decision process (MDP) in which the environment is a stochastic discrete-time dynamical system. Whereas MDPs are suitable in such applications as video-games or puzzles, physical systems are time-continuous. A general variant of RL is of digital format, where updates of the value (or cost) and policy are performed at discrete moments in time. The agent-environment loop then amounts to a sampled system, whereby sample-and-hold is a specific case. In this paper, we propose and benchmark two RL methods suitable for sampled systems. Specifically, we hybridize model-predictive control (MPC) with critics learning the optimal Q- and value (or cost-to-go) function. Optimality is analyzed and performance comparison is done in an experimental case study with a mobile robot.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI