予測的安全表現を用いた安全な自動運転ポリシーの学習
Learning Safe Autonomous Driving Policies Using Predictive Safety Representations
将来の制約違反を予測する安全表現を強化学習に組み込み、自動運転の性能と安全性のトレードオフを改善する手法を実データで検証した。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Mahesh Keswani, Raunak Bhattacharyya
分類: cs.LG, cs.RO
原文アブストラクト
Safe reinforcement learning (SafeRL) is a prominent paradigm for autonomous driving, where agents are required to optimize performance under strict safety requirements. This dual objective creates a fundamental tension, as overly conservative policies limit driving efficiency while aggressive exploration risks safety violations. The Safety Representations for Safer Policy Learning (SRPL) framework addresses this challenge by equipping agents with a predictive model of future constraint violations and has shown promise in controlled environments. This paper investigates whether SRPL extends to real-world autonomous driving scenarios. Systematic experiments on the Waymo Open Motion Dataset (WOMD) and NuPlan demonstrate that SRPL can improve the reward-safety tradeoff, achieving statistically significant improvements in success rate (effect sizes r = 0.65-0.86) and cost reduction (effect sizes r = 0.70-0.83), with p < 0.05 for observed improvements. However, its effectiveness depends on the underlying policy optimizer and the dataset distribution. The results further show that predictive safety representations play a critical role in improving robustness to observation noise. Additionally, in zero-shot cross-dataset evaluation, SRPL-augmented agents demonstrate improved generalization compared to non-SRPL methods. These findings collectively demonstrate the potential of predictive safety representations to strengthen SafeRL for autonomous driving.
関連論文
- 安全な実行を超えて:価値校正と適応的ガイダンスによる自動運転のための安全なオンライン強化学習自動運転/安全強化学習
- 安全でロバストな自動運転のためのリスク感受性と不確実性を考慮した意思決定・制御フレームワーク自動運転/安全強化学習
- 調和勾配を用いた分布型Soft Actor-Criticによるマルチレーン自動運転の安全かつ効率的な学習自動運転/安全強化学習
- VLM-SAFE: 視覚言語モデルと世界モデルによる安全志向の自動運転強化学習自動運転/安全強化学習
- シーン分解を用いた安全強化学習による複雑な都市環境の走行自動運転/安全強化学習
