日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

強化学習/インターフェースarXiv:1906.02641

エージェント設計のための拡張可能な対話型インターフェース

An Extensible Interactive Interface for Agent Design

シェア:XThreadsFacebookLINEはてブBluesky

複雑なタスクを報酬関数で指定する代わりに、ユーザーが既存ポリシーを切り替えながらデモンストレーションを行い、それに基づいて新ポリシーを学習する対話型インターフェースを提案。Lunar Landerで有効性を示した。

著者: Matthew Rahtz, James Fang, Anca D. Dragan, Dylan Hadfield-Menell

分類: cs.LG, cs.HC, cs.RO, stat.ML

原文アブストラクト

In artificial intelligence, we often specify tasks through a reward function. While this works well in some settings, many tasks are hard to specify this way. In deep reinforcement learning, for example, directly specifying a reward as a function of a high-dimensional observation is challenging. Instead, we present an interface for specifying tasks interactively using demonstrations. Our approach defines a set of increasingly complex policies. The interface allows the user to switch between these policies at fixed intervals to generate demonstrations of novel, more complex, tasks. We train new policies based on these demonstrations and repeat the process. We present a case study of our approach in the Lunar Lander domain, and show that this simple approach can quickly learn a successful landing policy and outperforms an existing comparison-based deep RL method.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI