日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

最適制御/学習arXiv:1912.12970

ポントリャーギン微分可能プログラミング:エンドツーエンド学習と制御の統一フレームワーク

Pontryagin Differentiable Programming: An End-to-End Learning and Control Framework

シェア:XThreadsFacebookLINEはてブBluesky

ポントリャーギンの最大原理を通じて微分を行い、軌道のパラメータに対する解析的勾配を求めることで、ダイナミクス・方策・目的関数のエンドツーエンド学習を可能にする統一的な学習・制御フレームワークを提案した。

著者: Wanxin Jin, Zhaoran Wang, Zhuoran Yang, Shaoshuai Mou

分類: cs.LG, cs.RO, cs.SY, eess.SY, math.OC

原文アブストラクト

This paper develops a Pontryagin Differentiable Programming (PDP) methodology, which establishes a unified framework to solve a broad class of learning and control tasks. The PDP distinguishes from existing methods by two novel techniques: first, we differentiate through Pontryagin's Maximum Principle, and this allows to obtain the analytical derivative of a trajectory with respect to tunable parameters within an optimal control system, enabling end-to-end learning of dynamics, policies, or/and control objective functions; and second, we propose an auxiliary control system in the backward pass of the PDP framework, and the output of this auxiliary control system is the analytical derivative of the original system's trajectory with respect to the parameters, which can be iteratively solved using standard control tools. We investigate three learning modes of the PDP: inverse reinforcement learning, system identification, and control/planning. We demonstrate the capability of the PDP in each learning mode on different high-dimensional systems, including multi-link robot arm, 6-DoF maneuvering quadrotor, and 6-DoF rocket powered landing.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  4. 4GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI