日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

強化学習arXiv:1903.09366

変分オートエンコーダによる系列分離を伴うマクロ行動強化学習

Macro Action Reinforcement Learning with Sequence Disentanglement using Variational Autoencoder

シェア:XThreadsFacebookLINEはてブBluesky

変分オートエンコーダで行動系列の分離された因子表現を自律的に学習し、汎用強化学習アルゴリズムに直接適用できるマクロ行動を生成するFaMARLを提案した論文。

著者: Heecheol Kim, Masanori Yamada, Kosuke Miyoshi, Hiroshi Yamakawa

分類: cs.LG, cs.AI, cs.RO, stat.AP, stat.ML

原文アブストラクト

One problem in the application of reinforcement learning to real-world problems is the curse of dimensionality on the action space. Macro actions, a sequence of primitive actions, have been studied to diminish the dimensionality of the action space with regard to the time axis. However, previous studies relied on humans defining macro actions or assumed macro actions as repetitions of the same primitive actions. We present Factorized Macro Action Reinforcement Learning (FaMARL) which autonomously learns disentangled factor representation of a sequence of actions to generate macro actions that can be directly applied to general reinforcement learning algorithms. FaMARL exhibits higher scores than other reinforcement learning algorithms on environments that require an extensive amount of search.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI