日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

sim2realarXiv:2511.07155

自動運転の強化学習におけるSim-to-Real転移のための動力学分離型軌道アライメント

Dynamics-Decoupled Trajectory Alignment for Sim-to-Real Transfer in Reinforcement Learning for Autonomous Driving

シェア:XThreadsFacebookLINEはてブBluesky

強化学習エージェントをシミュレーションで訓練し、その振る舞いを軌道予測エージェントに蒸留することで、実車両へのゼロショット転移を可能にするフレームワークを提案した。

詳しい要約

1. どんなもの?

- 自動運転向け強化学習(RL)のsim-to-real転移フレームワーク - 運動計画(motion planning)と車両制御(vehicle control)を分離 - 仮想車両と実車の空間的・時間的alignmentを導入 - 実車でのzero-shot transferを目指す

2. 先行研究と比べてどこがすごい?

- 従来はtire特性・路面・空力外乱・積載など実世界dynamicsの正確なモデル化が困難で、simulationで学習したRL agentの直接転移が阻害されていた - 本研究はdynamicsの完全なモデル化を避け、計画と制御のdecouplingとalignmentで対処する点が異なる - 具体的な先行研究との定量比較は要旨からは不明

3. 技術・手法の肝は?

- simulationでkinematic bicycle modelを用いRL agentを学習し連続制御actionを出力 - その挙動をtrajectory-predicting agentへdistillし、有限horizonのego-vehicle軌道を生成 - 仮想車両と実車の同期を可能にする - 展開時はStanley controllerがlateral dynamicsを担当 - longitudinalは仮想・実軌道の偏差を補償するadaptive update mechanismで整合

4. どうやって有効だと検証した?

- 実車(real vehicle)上で検証 - 提案alignment strategyによりRL-based motion planningのsimulationから現実へのrobustなzero-shot transferを実証 - 高レベル軌道生成と低レベル車両制御のdecouplingが成功することを示した - 定量的指標や比較条件の詳細は要旨からは不明

5. 議論はある?

- 計画と制御のdecouplingにより実世界dynamicsの正確なモデル化を回避できる点を主張 - 限界・失敗ケース・感度分析などの議論は要旨からは不明 - 実車検証の規模や多様な環境での頑健性は要旨からは不明

6. 次に読むべき論文は?

- kinematic bicycle modelを用いたRL-based motion planningの研究 - behavior distillation / trajectory-predicting agentに関する研究 - Stanley controllerによるlateral controlの研究 - sim-to-real transferおよびdomain randomizationの関連研究 - 要旨で直接参照・比較されている個別論文は不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Thomas Steinecker, Alexander Bienemann, Denis Trescher, Thorsten Luettel, Mirko Maehlisch

分類: cs.RO, cs.LG

原文アブストラクト

Reinforcement learning (RL) has shown promise in robotics, but deploying RL on real vehicles remains challenging due to the complexity of vehicle dynamics and the mismatch between simulation and reality. Factors such as tire characteristics, road surface conditions, aerodynamic disturbances, and vehicle load make it infeasible to model real-world dynamics accurately, which hinders direct transfer of RL agents trained in simulation. In this paper, we present a framework that decouples motion planning from vehicle control through a spatial and temporal alignment strategy between a virtual vehicle and the real system. An RL agent is first trained in simulation using a kinematic bicycle model to output continuous control actions. Its behavior is then distilled into a trajectory-predicting agent that generates finite-horizon ego-vehicle trajectories, enabling synchronization between virtual and real vehicles. At deployment, a Stanley controller governs lateral dynamics, while longitudinal alignment is maintained through adaptive update mechanisms that compensate for deviations between virtual and real trajectories. We validate our approach on a real vehicle and demonstrate that the proposed alignment strategy enables robust zero-shot transfer of RL-based motion planning from simulation to reality, successfully decoupling high-level trajectory generation from low-level vehicle control.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI