日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

強化学習arXiv:1806.06569

失敗する初期状態から学ぶ:優雅に転べるロボットの設計

Learning from Outside the Viability Kernel: Why we Should Build Robots that can Fall with Grace

シェア:XThreadsFacebookLINEはてブBluesky

強化学習において、失敗が避けられない初期状態をあえて学習に含めることで、報酬地形の勾配が改善され学習効率が向上することを示した論文。

著者: Steve Heim, Alexander Spröwitz

分類: cs.AI, cs.RO

原文アブストラクト

Despite impressive results using reinforcement learning to solve complex problems from scratch, in robotics this has still been largely limited to model-based learning with very informative reward functions. One of the major challenges is that the reward landscape often has large patches with no gradient, making it difficult to sample gradients effectively. We show here that the robot state-initialization can have a more important effect on the reward landscape than is generally expected. In particular, we show the counter-intuitive benefit of including initializations that are unviable, in other words initializing in states that are doomed to fail.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI