日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ナビゲーションarXiv:2605.02528

専門化を超えて:手続き的マップ生成によるロバストな強化学習ナビゲーション

Beyond Specialization: Robust Reinforcement Learning Navigation via Procedural Map Generators

シェア:XThreadsFacebookLINEはてブBluesky

強化学習ナビゲーションの汎化性能を、多様な手続き的マップ生成器を組み合わせて訓練することで向上させる手法を提案し、シミュレーションと実機で検証した。

詳しい要約

1. どんなもの?

- LiDAR-based navigationのための2D simulator MuRoSimを提案 - 4種類のprocedural map generator(sparse, maze, graph, Wave Function Collapse)を統合 - 5つのnavigation policyをgenerator間でcross-evaluateし、汎化性能を評価 - 訓練環境の多様性がDRL policyの汎化に与える影響を体系的に比較

2. 先行研究と比べてどこがすごい?

- 従来はprocedural map generationの多様性がpolicy汎化に与える影響を体系的に比較した研究がなかった - 本研究はgeneratorタイプの違いが汎化に与える影響を初めて定量的に示した - 特にcross-generator transferの非対称性を明らかにし、combined generator setの有効性を実証

3. 技術・手法の肝は?

- MuRoSimに4つのgenerator(sparse, maze, graph, Wave Function Collapse)を統合し、navigabilityを保証 - 5つのnavigation policyを1000 seeded maps per generator、3 training seedsでcross-evaluate - A* path-planner subgoal入力を用いることでrobustnessを向上 - GRU recurrenceとの比較も実施

4. どうやって有効だと検証した?

- 1000 seeded maps per generator、3 training seedsでcross-evaluate - sparseで訓練したspecialistはmazeで3.3%成功、combined generator setでは91.5±1.1%成功 - A* subgoal入力でfeedforward baselineの90.2±1.4%から98.9±0.4%に向上 - classical Carrot+A* controllerと比較し、低速では同等だが2.0 m/sで24.9%に低下 - RoboMasterでのreal-world experimentsでsim-to-real転移を確認

5. 議論はある?

- cross-generator transferの非対称性が存在 - A* subgoal入力がrobustnessの支配的要因 - GRU recurrenceはreactive baselineのみ改善 - learned speed adaptationが学習手法の決定的優位性 - maze-like layoutでは残存するfailure modesがあり、recurrenceが緩和に寄与

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:特になし - 関連手法:procedural map generation, Wave Function Collapse, A* path planner, GRU recurrence, Carrot+A* controller - 同分野の定番:DRL navigation, sim-to-real transfer

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Christian Jestel, Nicolas Bach, Marvin Wiedemann, Jan Finke, Peter Detzner

分類: cs.RO, cs.LG

原文アブストラクト

Deep reinforcement learning (DRL) navigation policies often overfit to the structure of their training environments, as environmental diversity is typically constrained by the manual effort required to design diverse scenarios. While procedural map generation offers scalable diversity, no prior work systematically compares how different generator types affect policy generalization. We integrate four generators (sparse, maze, graph, and Wave Function Collapse) with guaranteed navigability into MuRoSim, a 2D simulator focusing on training efficiency for LiDAR-based navigation. We cross-evaluate five navigation policies on 1000 seeded maps per generator across three training seeds. Results show a strongly asymmetric cross-generator transfer: a specialist trained on sparse layouts falls to 3.3% success on mazes, whereas a policy trained on the combined generator set achieves 91.5 +/- 1.1% mean success. We further demonstrate that A* path-planner subgoal inputs are the dominant factor for robustness, raising success from the 90.2 +/- 1.4% feedforward baseline to 98.9 +/- 0.4% and outperforming GRU recurrence, which only improves the reactive baseline. The DRL policies outperform a classical Carrot+A* controller, which matches their success only at low speeds (1.0 m/s) but collapses to 24.9% at 2.0 m/s. This highlights learned speed adaptation as the decisive advantage of the learned approach. Real-world experiments on a RoboMaster confirm sim-to-real transfer in a cluttered arena, while a maze-like layout exposes remaining failure modes that recurrence helps mitigate.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI