安全性と有効性を両立する制御方策のモデルフリー学習
Model-Free Learning of Safe yet Effective Controllers
未知のMDP環境において、安全性を最優先しつつLTL仕様の充足確率と制御性能報酬を最大化するモデルフリー強化学習アルゴリズムを提案した論文。
著者: Alper Kamil Bozkurt, Yu Wang, Miroslav Pajic
分類: cs.RO, cs.FL, cs.LG, cs.LO
原文アブストラクト
We study the problem of learning safe control policies that are also effective; i.e., maximizing the probability of satisfying a linear temporal logic (LTL) specification of a task, and the discounted reward capturing the (classic) control performance. We consider unknown environments modeled as Markov decision processes. We propose a model-free reinforcement learning algorithm that learns a policy that first maximizes the probability of ensuring safety, then the probability of satisfying the given LTL specification and lastly, the sum of discounted Quality of Control rewards. Finally, we illustrate applicability of our RL-based approach.
関連論文
- 目標到達強化学習に対する進捗保証付き可逆シンプレックス監督強化学習/安全制御
- リスク感応型行動価値反復と分位点回帰による安全志向強化学習制御強化学習/安全制御
- 適応型制御Lyapunov関数による強化学習の安定性向上強化学習/安全制御
- 形式的目标到達保証を備えた新規エージェント:移動ロボットによる実験的検証強化学習/安全制御
- 到達回避強化学習による安全性と活性の保証強化学習/安全制御
