日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

運動計画/強化学習arXiv:2102.03138

密集・動的環境におけるロボット運動計画のためのアドバンテージ付きアクター・クリティックアルゴリズム

An advantage actor-critic algorithm for robotic motion planning in dense and dynamic scenarios

シェア:XThreadsFacebookLINEはてブBluesky

連続行動空間での複雑な運動計画に適応させたアドバンテージ付きアクター・クリティック強化学習を提案し、密集・動的障害物環境で従来の価値ベースRLより高速かつ安定に収束し、成功率と到達時間を改善した。

著者: Chengmin Zhou, Bingding Huang, Pasi Fränti

分類: cs.RO, cs.AI

原文アブストラクト

Intelligent robots provide a new insight into efficiency improvement in industrial and service scenarios to replace human labor. However, these scenarios include dense and dynamic obstacles that make motion planning of robots challenging. Traditional algorithms like A* can plan collision-free trajectories in static environment, but their performance degrades and computational cost increases steeply in dense and dynamic scenarios. Optimal-value reinforcement learning algorithms (RL) can address these problems but suffer slow speed and instability in network convergence. Network of policy gradient RL converge fast in Atari games where action is discrete and finite, but few works have been done to address problems where continuous actions and large action space are required. In this paper, we modify existing advantage actor-critic algorithm and suit it to complex motion planning, therefore optimal speeds and directions of robot are generated. Experimental results demonstrate that our algorithm converges faster and stable than optimal-value RL. It achieves higher success rate in motion planning with lesser processing time for robot to reach its goal.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI