日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

群制御arXiv:2512.11781

マルチエージェント競争から創発する敏捷な飛行

Agile Flight Emerges from Multi-Agent Competitive Racing

シェア:XThreadsFacebookLINEはてブBluesky

強化学習で複数のドローンを競争させると、高速飛行や追い抜き・ブロックといった戦略が自然に獲得され、単体訓練よりも実世界への転移性能が高いことを示した。

詳しい要約

1. どんなもの?

- 複数エージェントの競争を通じて、agile flight と戦略的行動が reinforcement learning で創発することを示す研究 - 対象はドローンのレース - 報酬は「レースに勝つ」という sparse な高レベル目的のみ - 高速飛行(プラットフォームの物理限界を押す動き)と、追い抜き・ブロックなどの戦略が同時に獲得される - simulation と real world の両方で検証 - code 公開あり(https://github.com/Jirl-upenn/AgileFlight_MultiAgent)

2. 先行研究と比べてどこがすごい?

- 従来の一般的なパラダイムは、エージェントを単独で訓練し、raceline 上の進捗など行動を規定する reward を与えるもの - 本研究は multi-agent competition により、特に障害物があるなど環境の複雑性が増す場合に、この従来型を上回ることを示す - 同一の simulation 環境・randomization 戦略・ハードウェアを用いても、multi-agent competition の policy の方が単一エージェントの progress-based reward の policy より sim-to-real transfer が信頼できる - さらに訓練時に見ていない相手への一定程度の generalization も示す

3. 技術・手法の肝は?

- multi-agent competition と、レース勝利という sparse な高レベル objective を用いた reinforcement learning - 行動を規定する密な reward(例:raceline 上の進捗)ではなく、タスクレベルの sparse reward のみで訓練 - 複数エージェントの競争が、agile flight と overtaking・blocking などの戦略の創発を駆動 - 詳細なアルゴリズム・ネットワーク構成・reward 設計は要旨からは不明

4. どうやって有効だと検証した?

- simulation と real world の両方で evidence を提示 - 障害物の有無など環境の複雑性を変え、従来の単独訓練+progress-based reward と比較 - 同一の simulation 環境・randomization 戦略・ハードウェアの条件で sim-to-real transfer を比較 - 訓練時に見ていない opponent への generalization を評価 - 定量的な指標・実験規模は要旨からは不明

5. 議論はある?

- multi-agent competition が、物理世界における高度な低レベル制御を可能にする訓練に sparse なタスクレベル reward で十分であることを示唆 - digital domain における multi-agent 競技ゲームプレイの伝統に連なる位置づけ - sim-to-real transfer の改善と、未見 opponent への generalization の両面を議論 - 限界・失敗事例・計算コストなどの詳細な議論は要旨からは不明

6. 次に読むべき論文は?

- 要旨で比較されている従来型アプローチ:単一エージェント訓練+progress-based reward(raceline 進捗報酬) - 関連手法として multi-agent reinforcement learning、sim-to-real transfer、domain randomization の代表的文献 - 同分野の定番として agile drone racing の強化学習研究 - 具体的な論文名は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Vineet Pasumarti, Lorenzo Bianchi, Antonio Loquercio

分類: cs.RO, cs.AI, cs.MA

原文アブストラクト

Through multi-agent competition and the sparse high-level objective of winning a race, we find that both agile flight (e.g., high-speed motion pushing the platform to its physical limits) and strategy (e.g., overtaking or blocking) emerge from agents trained with reinforcement learning. We provide evidence in both simulation and the real world that this approach outperforms the common paradigm of training agents in isolation with rewards that prescribe behavior, e.g., progress on the raceline, in particular when the complexity of the environment increases, e.g., in the presence of obstacles. Moreover, we find that multi-agent competition yields policies that transfer more reliably to the real world than policies trained with a single-agent progress-based reward, despite the two methods using the same simulation environment, randomization strategy, and hardware. In addition to improved sim-to-real transfer, the multi-agent policies also exhibit some degree of generalization to opponents unseen at training time. Overall, our work, following in the tradition of multi-agent competitive game-play in digital domains, shows that sparse task-level rewards are sufficient for training agents capable of advanced low-level control in the physical world. Code: https://github.com/Jirl-upenn/AgileFlight_MultiAgent

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI