日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

強化学習レースarXiv:2510.26040

強化学習によるF1TENTHレースでの実環境追い抜きの加速

Accelerating Real-World Overtaking in F1TENTH Racing Employing Reinforcement Learning Methods

シェア:XThreadsFacebookLINEはてブBluesky

F1TENTH車両に強化学習エージェントを実装し、対戦相手と訓練することで実世界での追い抜き成功率を87%まで向上させた。

詳しい要約

1. どんなもの?

- F1TENTH の実機プラットフォーム上で、wheel-to-wheel racing と overtaking を強化学習で学習する研究 - シミュレーションと実環境の両方で、トラック走行と相手車両の追い越しを学習する racing/overtaking agent を提案 - 実機 F1Tenth 車両に agent を搭載し、様々な competitive algorithms を走らせる対戦相手と実世界で競争 - 対戦相手と訓練した agent は 87% の overtaking rate を達成し、単に race するだけの訓練 agent の 56% を上回った

2. 先行研究と比べてどこがすごい?

- 従来の autonomous racing は Time-Trial シナリオで大きく進展したが、wheel-to-wheel racing と overtaking は依然として限定的 - 実環境では state-of-the-art algorithms が overtake を安全・確実に完了するのに苦戦する点が課題 - 本研究は F1Tenth Competition の標準化された物理プラットフォームを活用し、overtaking と wheel-to-wheel racing algorithms を state-of-the-art と比較評価可能にした - 対戦相手を相手に訓練することで、単なる走行訓練を超えた意図的な overtaking behaviours を実機で示した点が特徴

3. 技術・手法の肝は?

- 強化学習 (Reinforcement Learning) を用いた racing および overtaking agent を構築 - シミュレーションと実環境の両方で、トラック走行と対戦相手の追い越しを学習 - 訓練時に様々な competitive algorithms を走らせる対戦相手と対戦させることで、overtaking 行動を獲得 - 学習済み agent を F1Tenth 実機車両に deploy し、実世界の対戦で評価 - 具体的なアルゴリズム名・ネットワーク構成・報酬設計は要旨からは不明

4. どうやって有効だと検証した?

- 学習した agent を F1Tenth 車両に搭載し、実世界で様々な competitive algorithms を走らせる対戦相手と競争させて評価 - 対戦相手と訓練した agent の overtaking rate は 87%、単に race するだけの訓練 agent は 56% と報告 - シミュレーションと実環境の両方で、トラック走行と overtaking の信頼性を検証 - 評価の詳細な条件・試行回数・統計手法は要旨からは不明

5. 議論はある?

- 実環境での wheel-to-wheel racing と overtaking の難しさ、state-of-the-art algorithms の限界を背景に議論 - 対戦相手を相手に訓練することが、意図的な overtaking behaviours の獲得に有効であることを結果が示唆 - F1Tenth Competition の標準化プラットフォームが、overtaking/wheel-to-wheel algorithms の比較評価に有用であると主張 - 限界・失敗事例・安全性の詳細な議論は要旨からは不明

6. 次に読むべき論文は?

- F1TENTH Competition および F1Tenth プラットフォームに関する研究 - autonomous racing の Time-Trial シナリオにおける強化学習研究 - wheel-to-wheel racing および overtaking の強化学習研究 - 実機 autonomous racing における sim-to-real 転移の研究 - 対戦相手を考慮した multi-agent reinforcement learning の競争走行研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Emily Steiner, Daniel van der Spuy, Futian Zhou, Afereti Pama, Minas Liarokapis, Henry Williams

分類: cs.RO, cs.LG

原文アブストラクト

While autonomous racing performance in Time-Trial scenarios has seen significant progress and development, autonomous wheel-to-wheel racing and overtaking are still severely limited. These limitations are particularly apparent in real-life driving scenarios where state-of-the-art algorithms struggle to safely or reliably complete overtaking manoeuvres. This is important, as reliable navigation around other vehicles is vital for safe autonomous wheel-to-wheel racing. The F1Tenth Competition provides a useful opportunity for developing wheel-to-wheel racing algorithms on a standardised physical platform. The competition format makes it possible to evaluate overtaking and wheel-to-wheel racing algorithms against the state-of-the-art. This research presents a novel racing and overtaking agent capable of learning to reliably navigate a track and overtake opponents in both simulation and reality. The agent was deployed on an F1Tenth vehicle and competed against opponents running varying competitive algorithms in the real world. The results demonstrate that the agent's training against opponents enables deliberate overtaking behaviours with an overtaking rate of 87% compared 56% for an agent trained just to race.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI