日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

sim2realarXiv:2610.03924

動揺する船甲板への自律着陸のためのバリア形状リカレント強化学習

Barrier-Shaped Recurrent Reinforcement Learning for Autonomous Landing on a Heaving Ship Deck

シェア:XThreadsFacebookLINEはてブBluesky

将来の甲板高さを見る非対称アクター・クリティック強化学習と制御バリア関数による安全マージンを用いて、動揺する船甲板へのUAV着陸を実現し、実機実験で検証した。

詳しい要約

1. どんなもの?

- UAV rotorcraft を heaving ship deck に自律着陸させる研究。 - recurrent policy を asymmetric actor-critic RL で訓練。 - critic は訓練時のみ将来 6 s の deck height を観測、actor は機載 sensor のみ。 - 状態は deck 相対の position, velocity, attitude の 17 次元、出力は world-frame velocity と yaw-rate 指令。 - 4096 並列 sim で訓練後、16 環境で onboard vision pipeline を loop に入れ fine-tuning。 - CBF stopping margin を reward と runtime safety filter の 2 段階で導入。 - 着陸時は proximity-based thrust cutoff を直接指令。

2. 先行研究と比べてどこがすごい?

- 要旨からは不明(先行研究との直接比較は記述なし)。 - ただし CBF を reward と runtime filter の両方に用いる点、asymmetric actor-critic で将来 deck height を critic のみに与える点が特徴として示される。 - CBF なし policy と比べ median simulated contact speed が半減。

3. 技術・手法の肝は?

- asymmetric actor-critic RL:critic は 6 s 先の deck height を訓練時のみ利用、actor は機載 sensor 由来の 17 次元状態のみ。 - recurrent policy を採用。 - 4096 並列 sim 訓練 → 16 環境で vision pipeline in the loop の fine-tuning。 - CBF stopping margin を deck 相対 vertical state に適用:訓練時 reward 項、配備時 runtime safety filter(毎制御 step 評価、違反時は descent を abort/retry)。 - autopilot の disarm logic が moving deck 上の静止を検知できないため、touchdown 時に proximity-based thrust cutoff を landing pipeline で直接指令。

4. どうやって有効だと検証した?

- parallel-manipulator-platform-based deck emulator で heaving motion を再現(0.70 m peak-to-peak、7.5 s mean period)。 - quadcopter UAV と onboard camera を使用。 - 31 motion-capture trials と 20 vision-based trials を実施。 - 全 trial で着陸成功、median time to contact は 6.5 s と 7.3 s。 - 初回試行着陸は 77% と 50%。 - thrust cutoff 瞬間の mean deck-relative speed は 0.29 と 0.27 m/s。

5. 議論はある?

- 要旨からは不明(限界や議論の記述はない)。 - 示される事実:CBF なし比で median simulated contact speed が半減。 - autopilot disarm logic の検知不能性への対処として proximity-based thrust cutoff を採用。 - runtime safety filter は margin 違反時に abort/retry する。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として asymmetric actor-critic reinforcement learning、control-barrier-function (CBF)、recurrent policy が挙げられる。 - 同分野の定番として UAV autonomous landing、ship deck landing、sim-to-real transfer に関する研究が次に読む候補。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ritwik Shankar, Chiranjeev Prachand, Abhishek, Soumya Ranjan Sahoo

分類: eess.SY, cs.RO

原文アブストラクト

This paper addresses autonomous landing of unmanned aerial vehicle (UAV) rotorcrafts on a heaving ship deck using a recurrent policy trained via asymmetric actor-critic reinforcement learning: the critic sees 6 s of future deck height during training, while the actor sees only what the onboard sensors provide in flight, a 17-dimensional state made of the vehicle's position, velocity and attitude relative to the deck and outputs world-frame velocity and yaw-rate commands. Training is performed across 4096 parallel simulated environments, followed by fine-tuning in 16 environments with an onboard vision pipeline in the loop. A control-barrier-function (CBF) stopping margin on the deck-relative vertical state is incorporated at two stages: as a reward term during training, where it halves the median simulated contact speed relative to a policy trained without it, and as a runtime safety filter at deployment, evaluated at every control step to abort and retry the descent when the margin is violated. Because the autopilot's disarm logic cannot detect the vehicle resting on a moving deck, proximity-based thrust cutoff at touchdown is commanded directly in the landing pipeline. The proposed approach is validated using a parallel-manipulator-platform-based deck emulator that reproduces the heaving motion of the ship deck (scaled to 0.70 m peak-to-peak, 7.5 s mean period) and a quadcopter UAV with an onboard camera. Across 31 motion-capture and 20 vision-based trials, the UAV landed every time, with median times to contact of 6.5 and 7.3 s; 77% and 50% landed on the first attempt, with mean deck-relative speeds of 0.29 and 0.27 m/s, respectively, at the instant of thrust cutoff, which is the last speed under the policy's control. Supplementary video: https://youtu.be/S5hDkrSZJt4

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI