日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

制御/安定性学習arXiv:2506.01356

Zubovサンプリングと反復的領域拡張による安定化ニューラル制御器の二段階学習

Two-Stage Learning of Stabilizing Neural Controllers via Zubov Sampling and Iterative Domain Expansion

シェア:XThreadsFacebookLINEはてブBluesky

Zubovに着想を得たサンプリングと領域拡張で制御器とLyapunov関数を二段階学習し、NN検証器を拡張して連続時間系の安定性保証と吸引領域を従来より格段に広く推定する手法を提案。

詳しい要約

1. どんなもの?

- 連続時間システムに対し、neural network (NN) 制御器と Lyapunov function を同時に合成する二段階学習フレームワーク - Zubov に着想を得た region of attraction (ROA) の特徴づけを用いて安定性境界を直接推定 - 学習した NN 制御器の安定性保証と ROA 推定を目的とする - 形式的検証には NN verifier α,β-CROWN を拡張して用いる

2. 先行研究と比べてどこがすごい?

- 従来の連続時間系の学習・検証フレームワークには保守性が残っていた - Zubov 由来の ROA 特徴づけにより安定性境界を直接推定し、保守性を大幅に低減 - 既存研究は Lyapunov 条件の形式的検証に SMT solver 依存だったが、これを α,β-CROWN 拡張で置換 - 実験で baseline 比 ROA 体積が 5〜1.5×10^5 倍、dReal 比で検証が最大 40〜10,000 倍高速と報告

3. 技術・手法の肝は?

- 二段階学習で controller と Lyapunov function を jointly に合成 - Zubov-inspired な ROA 特徴づけを利用し、新規の training-data sampling strategy を提案 - 学習中の保守性を減らす domain-updating mechanism を導入 - α,β-CROWN を拡張し、dynamical systems の Jacobian を通した自動 bound propagation を実現 - 高コストな bisection を避ける新規 verification scheme を提案

4. どうやって有効だと検証した?

- 複数次元の複数の challenging nonlinear systems で制御器の合成と検証を数値実験 - baseline と比較して ROA 体積が 5〜1.5×10^5 倍大きいことを示す - 連続系の検証が従来の SMT solver dReal 比で最大 40〜10,000 倍高速であることを示す - コードを公開

5. 議論はある?

- 従来フレームワークの保守性を Zubov sampling と domain expansion で低減できると主張 - SMT solver 依存を避け NN verifier 拡張で検証効率を改善 - 具体的な限界や失敗ケース、理論保証の詳細は要旨からは不明 - 実験は数値実験であり実機検証については要旨からは不明

6. 次に読むべき論文は?

- Zubov の定理に基づく ROA 推定に関する古典的・関連研究 - α,β-CROWN およびその bound propagation に関する研究 - SMT solver dReal を用いた Lyapunov 条件検証の既存研究 - NN 制御器の stability verification に関する関連手法(baseline 群)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Haoyu Li, Xiangru Zhong, Bin Hu, Huan Zhang

分類: cs.LG, cs.RO, cs.SY, eess.SY

原文アブストラクト

Learning-based neural network (NN) control policies have shown impressive empirical performance. However, obtaining stability guarantees and estimates of the region of attraction of these learned neural controllers is challenging due to the lack of stable and scalable training and verification algorithms. Although previous works in this area have achieved great success, much conservatism remains in their frameworks. In this work, we propose a novel two-stage training framework to jointly synthesize a controller and a Lyapunov function for continuous-time systems. By leveraging a Zubov-inspired region of attraction characterization to directly estimate stability boundaries, we propose a novel training-data sampling strategy and a domain-updating mechanism that significantly reduces the conservatism in training. Moreover, unlike existing works on continuous-time systems that rely on an SMT solver to formally verify the Lyapunov condition, we extend state-of-the-art neural network verifier $\alpha,\!\beta$-CROWN with the capability of performing automatic bound propagation through the Jacobian of dynamical systems and a novel verification scheme that avoids expensive bisection. To demonstrate the effectiveness of our approach, we conduct numerical experiments by synthesizing and verifying controllers on several challenging nonlinear systems across multiple dimensions. We show that our training can yield region of attractions with volume $5 - 1.5\cdot 10^{5}$ times larger compared to the baselines, and our verification on continuous systems can be up to $40-10{,}000$ times faster compared to the traditional SMT solver dReal. Our code is available at https://github.com/Verified-Intelligence/Two-Stage_Neural_Controller_Training.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI