日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

状態推定/強化学習arXiv:2010.13529

リアプノフ理論に基づく強化学習型状態推定器

Lyapunov-Based Reinforcement Learning State Estimator

シェア:XThreadsFacebookLINEはてブBluesky

リアプノフ法と深層強化学習を組み合わせ、有界な推定誤差の収束を理論保証した非線形確率システム向け状態推定器を提案し、モンテカルロ実験で既存フィルタより頑健性が高いことを示した。

著者: Liang Hu, Chengwei Wu, Wei Pan

分類: cs.LG, cs.RO, cs.SY, eess.SY

原文アブストラクト

In this paper, we consider the state estimation problem for nonlinear stochastic discrete-time systems. We combine Lyapunov's method in control theory and deep reinforcement learning to design the state estimator. We theoretically prove the convergence of the bounded estimate error solely using the data simulated from the model. An actor-critic reinforcement learning algorithm is proposed to learn the state estimator approximated by a deep neural network. The convergence of the algorithm is analysed. The proposed Lyapunov-based reinforcement learning state estimator is compared with a number of existing nonlinear filtering methods through Monte Carlo simulations, showing its advantage in terms of estimate convergence even under some system uncertainties such as covariance shift in system noise and randomly missing measurements. To the best of our knowledge, this is the first reinforcement learning based nonlinear state estimator with bounded estimate error performance guarantee.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI