日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

適応制御arXiv:2104.02709

最適フィードバック方策の適応的変種

Adaptive Variants of Optimal Feedback Policies

シェア:XThreadsFacebookLINEはてブBluesky

不確かな非線形システムに対し、最適フィードバック方策とオンライン学習を安定に組み合わせる制御理論の枠組みを提案し、学習率のオンライン調整で安定性を保ちつつsim-to-realや転移学習に応用可能であることを示した。

著者: Brett T. Lopez, Jean-Jacques E. Slotine

分類: eess.SY, cs.RO, cs.SY

原文アブストラクト

The stable combination of optimal feedback policies with online learning is studied in a new control-theoretic framework for uncertain nonlinear systems. The framework can be systematically used in transfer learning and sim-to-real applications, where an optimal policy learned for a nominal system needs to remain effective in the presence of significant variations in parameters. Given unknown parameters within a bounded range, the resulting adaptive control laws guarantee convergence of the closed-loop system to the state of zero cost. Online adjustment of the learning rate is used as a key stability mechanism, and preserves certainty equivalence when designing optimal policies without assuming uncertainty to be within the control range. The approach is illustrated on the familiar mountain car problem, where it yields near-optimal performance despite the presence of parametric model uncertainty.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI