日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

安全強化学習arXiv:2402.04182

アンサンブルモデル予測型安全認証を用いた強化学習

Reinforcement Learning with Ensemble Model Predictive Safety Certification

シェア:XThreadsFacebookLINEはてブBluesky

安全制御器のオフラインデータのみを用い、モデルベース強化学習とチューブ型モデル予測制御を組み合わせて行動を補正し、制約違反を大幅に削減する手法を提案。

著者: Sven Gronauer, Tom Haider, Felippe Schmoeller da Roza, Klaus Diepold

分類: cs.LG, cs.RO

原文アブストラクト

Reinforcement learning algorithms need exploration to learn. However, unsupervised exploration prevents the deployment of such algorithms on safety-critical tasks and limits real-world deployment. In this paper, we propose a new algorithm called Ensemble Model Predictive Safety Certification that combines model-based deep reinforcement learning with tube-based model predictive control to correct the actions taken by a learning agent, keeping safety constraint violations at a minimum through planning. Our approach aims to reduce the amount of prior knowledge about the actual system by requiring only offline data generated by a safe controller. Our results show that we can achieve significantly fewer constraint violations than comparable reinforcement learning methods.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3Google DeepMind、ロボット向けAIを発表新製品・発表
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI