日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

宇宙機制御/強化学習arXiv:2610.17468

軌道マッチングからドッキングまで:多段階ランデブー軌道設計のための階層型強化学習アプローチ

From Orbit Matching to Docking: A Hierarchical Reinforcement-Learning Approach to Multiphase Rendezvous Trajectory Design

シェア:XThreadsFacebookLINEはてブBluesky

軌道マッチングからドッキングまでの多段階ランデブーを自律制御するため、5つのフェーズ別方策とそれらを選択する上位マネージャ方策からなる階層型強化学習フレームワークを提案し、固定順序実行と比較評価した。

詳しい要約

1. どんなもの?

- 宇宙機の自律的なRendezvous and Proximity Operations (RPO) を対象とした階層型強化学習フレームワーク。 - Orbit matchingからdockingまでの完全な軌道をカバーする3自由度のRPOを実現。 - 5つの専門ポリシー(orbit matching, far-range approach, mid-range approach, close-range approach, docking)を訓練。 - 学習された高レベルmanager policyが宇宙機の状態に応じてフェーズ固有のコントローラを選択。

2. 先行研究と比べてどこがすごい?

- 既存の強化学習アプローチはRPOシーケンスの一部のみを扱うか、手動で定義された切り替え条件に依存していた。 - 本研究は完全な軌道(orbit matchingからdockingまで)をカバーし、学習されたmanager policyによる自律的なフェーズ遷移を実現。 - 固定順序のヒューリスティックと比較して、軌道性能と遷移挙動を評価。

3. 技術・手法の肝は?

- 階層型強化学習:5つのフェーズ固有ポリシーと、それらを選択する高レベルmanager policyを訓練。 - 各ポリシーは特定のフェーズ(orbit matching, far-range approach, mid-range approach, close-range approach, docking)に特化。 - manager policyは進化する宇宙機の状態に基づいて適切なコントローラを選択。 - 3自由度のRPOを対象。

4. どうやって有効だと検証した?

- 完全なend-to-endのランデブーシーケンスで階層型アプローチを評価。 - 固定順序の呼び出しヒューリスティックと比較し、軌道性能と遷移挙動を評価。 - 個々のフェーズポリシーと完全な階層型システムの訓練および推論メトリクスを分析。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:既存の強化学習アプローチ(具体的名称は要旨に記載なし)、固定順序の呼び出しヒューリスティック。 - 関連手法:階層型強化学習、Rendezvous and Proximity Operations (RPO) に関する研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Mariko Storey-Matsutani, Anatoly Zlotnik, Lee Holguin, Zigfried Hampel-Arias, Richard Linares

分類: cs.RO, cs.LG, eess.SY

原文アブストラクト

As the complexity of space missions increases, autonomous spacecraft guidance must accommodate transitions between mission phases with distinct dynamics, objectives, and constraints. Rendezvous and proximity operations (RPO) are particularly challenging because they span multiple operating regimes, from orbital-scale matching and far-range approach to close-range maneuvering and terminal docking. Existing reinforcement-learning approaches generally address only a subset of this sequence or rely on manually defined switching conditions between controllers. This study presents a hierarchical reinforcement-learning framework for autonomous, three-degree-of-freedom RPO that spans the complete trajectory from orbit matching to docking. Five specialized policies are trained for orbit matching, far-range approach, mid-range approach, close-range approach, and docking. A learned high-level manager policy then selects among these phase-specific controllers based on the evolving spacecraft state. The hierarchical approach is evaluated over the full end-to-end rendezvous sequence and compared with a fixed sequential-invocation heuristic to assess trajectory performance and transition behavior. Training and inference metrics are also analyzed for the individual phase policies and the complete hierarchical system.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI