日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

リスク推論/意図予測arXiv:2506.17590

DRAMA-X: 運転における細粒度意図予測とリスク推論のベンチマーク

DRAMA-X: A Fine-grained Intent Prediction and Risk Reasoning Benchmark For Driving

シェア:XThreadsFacebookLINEはてブBluesky

自動運転向けに、歩行者や自転車などの意図予測・リスク評価・行動提案を評価する細粒度ベンチマークDRAMA-Xを構築し、VLMベースのベースラインSGG-Intentを提案した。

詳しい要約

1. どんなもの?

- DRAMA-X は自動運転向けの fine-grained な intent prediction と risk reasoning のベンチマーク - DRAMA dataset から automated annotation pipeline で構築 - 5,686 の accident-prone frames を含む - 注釈内容: object bounding boxes、nine-class directional intent taxonomy、binary risk scores、ego vehicle 向けの expert-generated action suggestions、descriptive motion summaries - 4つの相互関連タスク(object detection、intent prediction、risk assessment、action suggestion)を構造的に評価可能 - 併せて SGG-Intent という lightweight で training-free な参照 baseline を提案

2. 先行研究と比べてどこがすごい?

- VLM は open-vocabulary perception を可能にしたが、fine-grained intent reasoning への有用性は未探索と指摘 - 特に safety-critical 状況での multi-class intent prediction を評価する既存 benchmark は存在しないと主張 - よって DRAMA-X は、VRU(pedestrian・cyclist)の短期的 motion 理解を safety-critical 文脈で多クラス intent として評価する点が新規 - 既存研究との具体的な性能比較数値は要旨からは不明

3. 技術・手法の肝は?

- DRAMA-X: DRAMA dataset を automated annotation pipeline で拡張し、bounding boxes・nine-class directional intent taxonomy・binary risk scores・action suggestions・motion summaries を付与 - SGG-Intent: ego vehicle の reasoning pipeline を模した軽量・training-free フレームワーク - VLM-backed detectors で visual input から scene graph を逐次生成 - その上で intent 推論、risk 評価、action 推薦を実施 - 最終段は large language model による compositional reasoning で action を推薦

4. どうやって有効だと検証した?

- DRAMA-X の4タスク(object detection、intent prediction、risk assessment、action suggestion)全てで複数の recent VLMs を評価 - 実験により、scene-graph-based reasoning が intent prediction と risk assessment を改善することを示す - 特に contextual cues を明示的にモデル化した場合に有効と報告 - 具体的な指標・数値は要旨からは不明

5. 議論はある?

- scene graph と contextual cues の明示的モデル化が intent・risk 推論に寄与する点を議論 - VRU の短期的 motion 理解が urban の ambiguous/high-risk 状況で重要と位置づけ - 限界・失敗事例・計算コスト等の詳細な議論は要旨からは不明

6. 次に読むべき論文は?

- DRAMA(dataset) - SGG-Intent(本論文の baseline) - VLM-backed detectors を用いた scene graph 生成・compositional reasoning 関連手法 - VRU の intent prediction・risk assessment に関する既存研究(要旨では個別名の参照なし)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Mihir Godbole, Xiangbo Gao, Zhengzhong Tu

分類: cs.CV, cs.AI, cs.RO

原文アブストラクト

Understanding the short-term motion of vulnerable road users (VRUs) like pedestrians and cyclists is critical for safe autonomous driving, especially in urban scenarios with ambiguous or high-risk behaviors. While vision-language models (VLMs) have enabled open-vocabulary perception, their utility for fine-grained intent reasoning remains underexplored. Notably, no existing benchmark evaluates multi-class intent prediction in safety-critical situations, To address this gap, we introduce DRAMA-X, a fine-grained benchmark constructed from the DRAMA dataset via an automated annotation pipeline. DRAMA-X contains 5,686 accident-prone frames labeled with object bounding boxes, a nine-class directional intent taxonomy, binary risk scores, expert-generated action suggestions for the ego vehicle, and descriptive motion summaries. These annotations enable a structured evaluation of four interrelated tasks central to autonomous decision-making: object detection, intent prediction, risk assessment, and action suggestion. As a reference baseline, we propose SGG-Intent, a lightweight, training-free framework that mirrors the ego vehicle's reasoning pipeline. It sequentially generates a scene graph from visual input using VLM-backed detectors, infers intent, assesses risk, and recommends an action using a compositional reasoning stage powered by a large language model. We evaluate a range of recent VLMs, comparing performance across all four DRAMA-X tasks. Our experiments demonstrate that scene-graph-based reasoning enhances intent prediction and risk assessment, especially when contextual cues are explicitly modeled.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  4. 4GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  5. 5Google DeepMind、ロボット向けAIを発表新製品・発表

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI