日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

制御arXiv:2505.00165

不足駆動衛星の姿勢制御に向けた深層強化学習ポリシー

Deep Reinforcement Learning Policies for Underactuated Satellite Attitude Control

シェア:XThreadsFacebookLINEはてブBluesky

深層強化学習(PPO)を用いて、小型衛星の姿勢制御を学習させた研究。アクチュエータ故障時(不足駆動)でも大角度の姿勢変更を高精度に達成し、実機でも動作を確認した。

詳しい要約

1. どんなもの?

- 本論文は、衛星の姿勢制御(慣性座標系に対する宇宙機の角度再配向)に Deep Reinforcement Learning を適用する研究である。 - 制御方策を neural network として実装し、Proximal Policy Optimization のカスタム版で訓練する。 - 小型衛星をランダムな初期角度から目標指向へ機動させる問題を扱う。 - nominal case(3つの reaction wheels が正常)と underactuated case(1軸のアクチュエータ故障をランダムに模擬)の2条件を対象とする。

2. 先行研究と比べてどこがすごい?

- 要旨からは不明(先行研究との具体的比較は記述されていない)。 - ただし、nominal と underactuated の両条件で方策を学習させ、大角度 slew maneuver を高速収束と industry-standard pointing accuracy で達成した点を主張している。 - シミュレーション訓練済みの controller が実機(representative hardware)でも良好に動作することを示した点を特徴として挙げている。

3. 技術・手法の肝は?

- 制御方策を neural network として表現し、カスタム版 Proximal Policy Optimization で訓練する。 - 小型衛星をランダムな初期角度から所定の pointing target へ機動させるタスクを設定する。 - nominal case では3つの reaction wheels を正常に用いる。 - underactuated case では1軸のアクチュエータ故障をランダムに模擬する。 - シミュレーションで訓練した controller を実機で動作させるための適切な措置を検討する。

4. どうやって有効だと検証した?

- 学習した agent が大角度 slew maneuver を高速収束と industry-standard pointing accuracy で実行できることを示した。 - nominal case と underactuated case の両方で有効性を確認した。 - representative hardware 上で提案手法をテストし、シミュレーションで訓練した controller が実システムでも良好に性能を発揮することを示した。

5. 議論はある?

- 要旨からは不明(具体的な議論や限界は記述されていない)。 - シミュレーション訓練済み controller の実機適用には「adequate measures」が必要であると述べられている。 - underactuated case は1軸のアクチュエータ故障をランダムに模擬する設定であり、その他の故障形態については要旨からは不明。

6. 次に読むべき論文は?

- Proximal Policy Optimization(本論文でカスタム版を使用) - reaction wheels を用いた衛星姿勢制御に関する従来の制御手法(要旨では具体的名称は挙げられていない) - underactuated spacecraft attitude control に関する関連研究(要旨では具体的名称は挙げられていない)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Matteo El Hariry, Andrea Cini, Giacomo Mellone, Alessandro Balossino

分類: cs.RO

原文アブストラクト

Autonomy is a key challenge for future space exploration endeavours. Deep Reinforcement Learning holds the promises for developing agents able to learn complex behaviours simply by interacting with their environment. This paper investigates the use of Reinforcement Learning for the satellite attitude control problem, namely the angular reorientation of a spacecraft with respect to an in- ertial frame of reference. In the proposed approach, a set of control policies are implemented as neural networks trained with a custom version of the Proximal Policy Optimization algorithm to maneuver a small satellite from a random starting angle to a given pointing target. In particular, we address the problem for two working conditions: the nominal case, in which all the actuators (a set of 3 reac- tion wheels) are working properly, and the underactuated case, where an actuator failure is simulated randomly along with one of the axes. We show that the agents learn to effectively perform large-angle slew maneuvers with fast convergence and industry-standard pointing accuracy. Furthermore, we test the proposed method on representative hardware, showing that by taking adequate measures controllers trained in simulation can perform well in real systems.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI