日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2610.15491

非協力ターゲットの捕捉と回転停止を端到端で行う位相ゲート付き制約強化学習

Phase-Gated Constrained Reinforcement Learning for End-to-End Capture and Detumbling of Non-Cooperative Targets

シェア:XThreadsFacebookLINEはてブBluesky

双腕自由飛行サービス衛星が、質量・慣性未知でノイズを含む観測のみの非協力回転ターゲットを、摩擦ベースの固定具なしで捕捉し完全に回転停止させるまでを、単一の制約付き強化学習方策で実現した。

詳しい要約

1. どんなもの?

非協力的な回転デブリに対し、dual-arm free-flying servicer が接近・摩擦ベースの固定具なし把持・完全 detumbling までを単一の constrained reinforcement learning 方策で遂行する研究。目標の mass と inertia は未知、状態は noisy estimates のみ。1000 回超の randomized trials で 99.5% 成功。

2. 先行研究と比べてどこがすごい?

従来は phase-specific controllers に分割され、target inertia の知識、専用 grappling fixture、接触 seam での手設計 switch に依存していた。本研究は単一方策で全 mission を実行し、fixture-free で未知 inertia に対応。zero-shot で未見 geometry と centre-of-mass offsets に転移し、target mass の tenfold 範囲に外挿。

3. 技術・手法の肝は?

constrained Markov decision process の 3 箇所に smooth proximity gate を適用。reward では phase structure を課すのではなく誘導、action space では degenerate grab-and-pull exploit を hard guarantee で排除、constraint set では phase 間で負荷が不均一な制約が precision の重要な phase でほぼ不活性になる normalization failure を解消。

4. どうやって有効だと検証した?

1000 回超の randomized trials で 99.5% 成功し、contact-force、actuator、base-reaction、collision の各 limit を維持。zero-shot で未見 geometry と centre-of-mass offsets に転移し、target mass の tenfold 範囲に外挿することで有効性を検証。

5. 議論はある?

constraint-based learning の normalization failure とその remedy は、この種の multi-phase problem 一般に適用可能と主張。要旨からは不明な点として、実機実験の有無や計算コスト、sim-to-real の詳細は述べられていない。

6. 次に読むべき論文は?

要旨で参照・比較されている研究は明示されていない。同分野の関連手法として、constrained reinforcement learning、phase-specific controllers、active debris removal の既存研究を挙げる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Álvaro Belmonte-Baeza, Celia Redondo-Verdú, José L. Ramón, Miguel Cazorla, Leonard Felicetti, Jorge Pomares

分類: cs.RO, eess.SY

原文アブストラクト

Active debris removal requires a servicer spacecraft to approach a non-cooperative tumbling object, capture it, and arrest its rotation. This sequence is conventionally divided among phase-specific controllers, each depending on knowledge of the target's inertia, a dedicated grappling fixture, or a hand-designed switch at the contact-rich seam where such pipelines are most fragile. We show that a single constrained reinforcement learning policy can execute the entire mission, driving a dual-arm free-flying servicer from free-space closing through friction-based fixture-free capture to full detumbling of a target whose mass and inertia are unknown and whose state is observed only through noisy estimates. The enabling mechanism is a smooth proximity gate applied at three loci of a constrained Markov decision process. In the reward it induces the phase structure rather than imposing it; in the action space it forecloses a degenerate grab-and-pull exploit as a hard guarantee; and in the constraint set it resolves a normalization failure of constraint-based learning, in which a constraint spanning phases that load it unequally is rendered nearly inert in the phase where precision matters most. Both the failure mode and the remedy apply to any multi-phase problem of this kind. Over 1000 randomized trials the policy succeeds in 99.5% while holding its contact-force, actuator, base-reaction and collision limits throughout, transfers zero-shot to unseen geometries and centre-of-mass offsets, and extrapolates across a tenfold range of target mass.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI