階層型強化学習によるマルチエージェントナビゲーション
Hierarchical Reinforcement Learning Framework towards Multi-agent Navigation
HMMで状況を評価して行動を選択し、下位層で目標追従と衝突回避を分離して学習する階層型ナビゲーション手法を提案し、従来手法より高い学習効率と成功率を示した。
著者: Wenhao Ding, Shuaijun Li, Huihuan Qian
分類: cs.RO, cs.MA
原文アブストラクト
In this paper, we propose a navigation algorithm oriented to multi-agent environment. This algorithm is expressed as a hierarchical framework that contains a Hidden Markov Model (HMM) and a Deep Reinforcement Learning (DRL) structure. For simplification, we term our method Hierarchical Navigation Reinforcement Network (HNRN). In high- level architecture, we train an HMM to evaluate the agent's perception to obtain a score. According to this score, adaptive control action will be chosen. While in low-level architecture, two sub-systems are introduced, one is a differential target- driven system, which aims at heading to the target; the other is a collision avoidance DRL system, which is used for avoiding dynamic obstacles. The advantage of this hierarchical structure is decoupling the target-driven and collision avoidance tasks, leading to a faster and more stable model to be trained. The experiments indicate that our algorithm has higher learning efficiency and rate of success than traditional Velocity Obstacle (VO) algorithms or hybrid DRL method.
関連論文
- ORION: オプション正則化深層強化学習による協調マルチエージェントオンラインナビゲーションマルチエージェントナビゲーション
- 反復リスク配分によるリスク制約付きマルチエージェント視覚ナビゲーションマルチエージェントナビゲーション
- GameChat: 制約環境における安全・俊敏・社会的に最適なマルチエージェントナビゲーションのためのマルチLLM対話マルチエージェントナビゲーション
- 目標条件付き安全強化学習による安全なマルチエージェントナビゲーションマルチエージェントナビゲーション
- CAMON: LLM対話による協調型マルチエージェント物体探索ナビゲーションマルチエージェントナビゲーション
- 知識蒸留を用いた人間らしいマルチエージェントナビゲーションマルチエージェントナビゲーション
