日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

sim2realarXiv:2512.13359

水中ビークルの6自由度位置制御のための高速方策学習

Fast Policy Learning for 6-DOF Position Control of Underwater Vehicles

シェア:XThreadsFacebookLINEはてブBluesky

JAXとMJXでGPU加速した強化学習パイプラインを構築し、2分未満で学習を完了させ、実機の水中実験でゼロショット転移による6自由度軌道追従と外乱抑制を実現した。

詳しい要約

1. どんなもの?

- 対象: Autonomous Underwater Vehicles (AUVs) の 6-DOF position control - 提案: GPU 加速の RL 学習パイプライン - JAX と MuJoCo-XLA (MJX) 上に構築 - 大規模並列の物理シミュレーションと学習更新を jointly JIT-compile - 主張: 学習時間 2 分未満、実機で zero-shot transfer による 6-DOF trajectory tracking と disturbance rejection を実現

2. 先行研究と比べてどこがすごい?

- 従来の controller: nominal 条件では有効だが unmodeled dynamics や environmental disturbances で性能劣化 - 既存 RL: 強力な代替だが training が遅く sim-to-real transfer が困難 - 本研究: JAX/MJX による高速化で 2 分未満の学習を達成し、zero-shot で実機転移を報告

3. 技術・手法の肝は?

- JAX と MuJoCo-XLA (MJX) を用いた GPU 加速 RL training pipeline - 大規模並列 physics simulation と learning updates の jointly JIT-compilation - 複数の RL algorithms を系統的に評価 - 詳細なアルゴリズム構成や reward 設計は要旨からは不明

4. どうやって有効だと検証した?

- 複数 RL algorithms の systematic evaluation - 実水下実験で 6-DOF trajectory tracking と disturbance rejection を評価 - simulation から zero-shot transfer した policies で検証 - 定量指標や比較条件の詳細は要旨からは不明

5. 議論はある?

- 学習時間 2 分未満や zero-shot transfer の成立条件・限界は要旨からは不明 - unmodeled dynamics や環境外乱への頑健性の範囲は要旨からは不明 - 実機実験の規模・再現性に関する議論は要旨からは不明

6. 次に読むべき論文は?

- MuJoCo-XLA (MJX) - JAX - 比較対象としての traditional controllers - 既存の RL による AUV control 研究(個別論文名は要旨からは不明)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Sümer Tunçay, Alain Andres, Ignacio Carlucho

分類: cs.RO, cs.LG

原文アブストラクト

Autonomous Underwater Vehicles (AUVs) require reliable six-degree-of-freedom (6-DOF) position control to operate effectively in complex and dynamic marine environments. Traditional controllers are effective under nominal conditions but exhibit degraded performance when faced with unmodeled dynamics or environmental disturbances. Reinforcement learning (RL) provides a powerful alternative but training is typically slow and sim-to-real transfer remains challenging. This work introduces a GPU accelerated RL training pipeline built in JAX and MuJoCo-XLA (MJX). By jointly JIT-compiling large-scale parallel physics simulation and learning updates, we achieve training times of under two minutes. Through systematic evaluation of multiple RL algorithms, we show robust 6-DOF trajectory tracking and effective disturbance rejection in real underwater experiments, with policies transferred zero-shot from simulation.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI