CARScenes: 安全な自動運転のための意味的VLMデータセット
CARScenes: Semantic VLM Dataset for Safe Autonomous Driving
自動運転向けに、環境や道路形状、車両挙動などを28カテゴリ・350以上の属性で注釈付けした5,192枚の画像データセットを構築し、VLMの学習・評価基盤を提供した。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Yuankai He, Weisong Shi
分類: cs.CV, cs.RO
原文アブストラクト
CAR-Scenes is a frame-level dataset for autonomous driving that enables training and evaluation of vision-language models (VLMs) for interpretable, scene-level understanding. We annotate 5,192 images drawn from Argoverse 1, Cityscapes, KITTI, and nuScenes using a 28-key category/sub-category knowledge base covering environment, road geometry, background-vehicle behavior, ego-vehicle behavior, vulnerable road users, sensor states, and a discrete severity scale (1-10), totaling 350+ leaf attributes. Labels are produced by a GPT-4o-assisted vision-language pipeline with human-in-the-loop verification; we release the exact prompts, post-processing rules, and per-field baseline model performance. CAR-Scenes also provides attribute co-occurrence graphs and JSONL records that support semantic retrieval, dataset triage, and risk-aware scenario mining across sources. To calibrate task difficulty, we include reproducible, non-benchmark baselines, notably a LoRA-tuned Qwen2-VL-2B with deterministic decoding, evaluated via scalar accuracy, micro-averaged F1 for list attributes, and severity MAE/RMSE on a fixed validation split. We publicly release the annotation and analysis scripts, including graph construction and evaluation scripts, to enable explainable, data-centric workflows for future intelligent vehicles. Dataset: https://github.com/Croquembouche/CAR-Scenes
関連論文
- BranchDrive: 行動条件付き運転予測のための分岐構造データセット自動運転データセット
- カメラ・LiDAR・レーダーとスキャン3Dモデルを備えたマルチビークルデータセット:RTK-GNSSによるカスタム自動アノテーション向け自動運転データセット
- A2RL Vmax: 長距離・高速知覚と複数車両インタラクションのためのA2RL自動運転レースデータセット自動運転データセット
- TaCarla: エンドツーエンド自動運転のための包括的ベンチマークデータセット自動運転データセット
- HetroD: 異種交通環境における自動運転のための高忠実度ドローンデータセットとベンチマーク自動運転データセット
- Boreas Road Trip: 難路におけるマルチセンサ自動運転データセット自動運転データセット
