日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

sim2realarXiv:1511.03791

視覚のみでロボットアームを制御する深層強化学習

Towards Vision-Based Deep Reinforcement Learning for Robotic Motion Control

シェア:XThreadsFacebookLINEはてブBluesky

生のカメラ画像だけから3関節ロボットアームの目標到達動作を深層強化学習(DQN)で学習させ、シミュレーションでは成功したが実機への単純な転移は失敗し、合成画像に置き換えると機能することを示した。

著者: Fangyi Zhang, Jürgen Leitner, Michael Milford, Ben Upcroft, Peter Corke

分類: cs.LG, cs.CV, cs.RO

原文アブストラクト

This paper introduces a machine learning based system for controlling a robotic manipulator with visual perception only. The capability to autonomously learn robot controllers solely from raw-pixel images and without any prior knowledge of configuration is shown for the first time. We build upon the success of recent deep reinforcement learning and develop a system for learning target reaching with a three-joint robot manipulator using external visual observation. A Deep Q Network (DQN) was demonstrated to perform target reaching after training in simulation. Transferring the network to real hardware and real observation in a naive approach failed, but experiments show that the network works when replacing camera images with synthetic images.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI