日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

強化学習評価arXiv:1911.06854

オフポリシー方策評価の実証ベンチマーク

Empirical Study of Off-Policy Policy Evaluation for Reinforcement Learning

シェア:XThreadsFacebookLINEはてブBluesky

強化学習におけるオフポリシー方策評価(OPE)手法を多様な実験設計で比較するベンチマークスイートCOBSを構築し、実践的な指針をまとめた。

著者: Cameron Voloshin, Hoang M. Le, Nan Jiang, Yisong Yue

分類: cs.LG, cs.AI, cs.RO, stat.ML

原文アブストラクト

We offer an experimental benchmark and empirical study for off-policy policy evaluation (OPE) in reinforcement learning, which is a key problem in many safety critical applications. Given the increasing interest in deploying learning-based methods, there has been a flurry of recent proposals for OPE method, leading to a need for standardized empirical analyses. Our work takes a strong focus on diversity of experimental design to enable stress testing of OPE methods. We provide a comprehensive benchmarking suite to study the interplay of different attributes on method performance. We distill the results into a summarized set of guidelines for OPE in practice. Our software package, the Caltech OPE Benchmarking Suite (COBS), is open-sourced and we invite interested researchers to further contribute to the benchmark.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI