故障耐性飛行制御のためのSoft Actor-Critic深層強化学習
Soft Actor-Critic Deep Reinforcement Learning for Fault Tolerant Flight Control
ジェット機の複数故障に対応できるモデルフリーの強化学習飛行制御器を提案し、オフライン学習したカスケードSoft Actor-Criticが協調旋回を高精度で達成しつつ6種類の故障に頑健であることを示した。
著者: Killian Dally, Erik-Jan van Kampen
分類: eess.SY, cs.LG, cs.RO, cs.SY
原文アブストラクト
Fault-tolerant flight control faces challenges, as developing a model-based controller for each unexpected failure is unrealistic, and online learning methods can handle limited system complexity due to their low sample efficiency. In this research, a model-free coupled-dynamics flight controller for a jet aircraft able to withstand multiple failure types is proposed. An offline trained cascaded Soft Actor-Critic Deep Reinforcement Learning controller is successful on highly coupled maneuvers, including a coordinated 40 degree bank climbing turn with a normalized Mean Absolute Error of 2.64%. The controller is robust to six failure cases, including the rudder jammed at -15 deg, the aileron effectiveness reduced by 70%, a structural failure, icing and a backward c.g. shift as the response is stable and the climbing turn is completed successfully. Robustness to biased sensor noise, atmospheric disturbances, and to varying initial flight conditions and reference signal shapes is also demonstrated.
関連論文
- 強化学習による固定翼機の自律迎撃強化学習/飛行制御
- 重心再構成による劣駆動飛行船の二段階強化学習制御強化学習/飛行制御
- AcroRL: 双方向推力を用いたアグレッシブなクアッドローター反転飛行の学習強化学習/飛行制御
- クアッドロータ低レベル制御のための同変強化学習フレームワーク強化学習/飛行制御
- トンボ型タンデム翼実験機のためのConcert強化学習によるリアルタイム制御強化学習/飛行制御
- TD3によるFPVゲートを通過するクアッドコプターのニューラルネットワーク制御強化学習/飛行制御
