日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

強化学習/ロバスト性/自律表面車両arXiv:2505.10033

実環境試験における自律表面車両制御のための深層強化学習のロバスト性評価

Evaluating Robustness of Deep Reinforcement Learning for Autonomous Surface Vehicle Control in Field Tests

シェア:XThreadsFacebookLINEはてブBluesky

浮遊ゴミ回収用の深層強化学習エージェントをドメインランダム化で訓練し、非対称抗力や偏心ペイロードなどの外乱下での実環境性能をMPCと比較評価した。

詳しい要約

1. どんなもの?

- 本研究は、浮遊ゴミ回収を目的とした Autonomous Surface Vehicle (ASV) の Deep Reinforcement Learning (DRL) ベース制御器のロバスト性を評価するもの。 - 実世界の外乱(非対称 drag、off-center payload など)に対する性能劣化を定量化し、MPC baseline と比較する。 - シミュレーションと実フィールドテストの両方で評価し、実装をオープンソース公開する。

2. 先行研究と比べてどこがすごい?

- DRL の ASV 応用は進展しているが、実世界の外乱下でのロバスト性は十分に検討されていない点を指摘。 - 本研究は domain randomization を用いた訓練と実フィールドテストを組み合わせ、外乱下の性能劣化を定量化する点が新しい。 - MPC baseline との比較により、DRL の実用性を相対的に評価する。

3. 技術・手法の肝は?

- domain randomization を用いて DRL agent を訓練し、外乱に対する頑健性を獲得させる。 - 非対称 drag や off-center payload などの予期しない外乱をシミュレーションと実世界で付与し、性能を評価。 - 性能劣化を定量化し、MPC baseline とベンチマーク比較する。 - 実装をオープンソースで公開し、訓練戦略や実世界の課題、実装上の考慮点を共有する。

4. どうやって有効だと検証した?

- シミュレーションと実世界のフィールドテストの両方で、外乱下の DRL agent の性能を評価。 - 非対称 drag と off-center payload の外乱を付与し、性能劣化を定量化。 - MPC baseline との比較により有効性を検証。 - 結果、DRL agent は大きな外乱下でも信頼性高く動作することを示した。

5. 議論はある?

- 実世界の外乱下での DRL の信頼性と性能劣化について議論。 - 効果的な訓練戦略、実世界の課題、DRL ベース ASV 制御器の展開に向けた実用的考慮点を提供。 - 具体的な限界や今後の課題については要旨からは不明。

6. 次に読むべき論文は?

- MPC baseline(Model Predictive Control) - domain randomization を用いた DRL 訓練手法 - ASV の浮遊ゴミ回収に関する関連研究(要旨では具体的な論文名は不明)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Luis F. W. Batista, Stéphanie Aravecchia, Seth Hutchinson, Cédric Pradalier

分類: cs.RO, cs.LG

原文アブストラクト

Despite significant advancements in Deep Reinforcement Learning (DRL) for Autonomous Surface Vehicles (ASVs), their robustness in real-world conditions, particularly under external disturbances, remains insufficiently explored. In this paper, we evaluate the resilience of a DRL-based agent designed to capture floating waste under various perturbations. We train the agent using domain randomization and evaluate its performance in real-world field tests, assessing its ability to handle unexpected disturbances such as asymmetric drag and an off-center payload. We assess the agent's performance under these perturbations in both simulation and real-world experiments, quantifying performance degradation and benchmarking it against an MPC baseline. Results indicate that the DRL agent performs reliably despite significant disturbances. Along with the open-source release of our implementation, we provide insights into effective training strategies, real-world challenges, and practical considerations for deploying DRLbased ASV controllers.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  4. 4GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI