日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転/認識arXiv:2605.07649

運用設計領域内での動作:視覚言語モデルによるゼロショット認識

Operating Within the Operational Design Domain: Zero-Shot Perception with Vision-Language Models

シェア:XThreadsFacebookLINEはてブBluesky

自動運転システムの安全規制に重要なODD要素の認識を、視覚言語モデル(VLM)を用いてゼロショットで行う手法を提案・評価した論文。

詳しい要約

1. どんなもの?

- 自動運転システム(ADS)の安全規制で重要なOperational Design Domain (ODD)の知覚を、Vision-Language Models (VLMs)でzero-shotに行う研究。 - VLMsを「ODDセンサ」として適応的に使えるか評価。 - 貢献は3点: (i) 4つのVLMによるzero-shot ODD分類・検出の実証研究(カスタムデータセットとMapillary Vistas、失敗分析含む)、(ii) zero-shot最適化戦略のablationとコスト性能概観、(iii) 適応のための再利用可能なprompting templatesとガイダンス。

2. 先行研究と比べてどこがすごい?

- 従来のODD知覚はタスク固有の訓練データを要するが、VLMsは訓練データなしで視覚認識と言語推論を統合。 - これにより、進化するODD定義に適応可能なzero-shot「ODDセンサ」として機能しうる点が新しい。 - 既存研究との具体的比較は要旨からは不明。

3. 技術・手法の肝は?

- Vision-Language Models (VLMs)をzero-shotでODD分類・検出に適用。 - 4つのVLMを評価し、zero-shot最適化戦略をablation。 - 定義に基づくchain-of-thought promptingとpersona decompositionが最良。 - 再利用可能なprompting templatesを提供。

4. どうやって有効だと検証した?

- カスタムデータセットとMapillary Vistasを用いて、4つのVLMのzero-shot ODD分類・検出を実証。 - 失敗分析を実施。 - zero-shot最適化戦略のablationとコスト性能概観を提示。

5. 議論はある?

- 定義に基づくchain-of-thought promptingとpersona decompositionが最良だが、他の手法はrecallを低下させる可能性。 - 安全クリティカルな応用における透明で効果的なODDベース知覚への道を開く。 - 具体的な限界や議論の詳細は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法としてVision-Language Models (VLMs)、chain-of-thought prompting、persona decomposition、Mapillary Vistasが挙げられる。 - 同分野の定番としてAutomated Driving Systems (ADS)のODD知覚に関する研究が考えられるが、具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Berkehan Ünal, Hauke Dierend, Dren Fazlija, Christopher Plachetka

分類: cs.CV, cs.AI, cs.RO

原文アブストラクト

Over the last few years, research on autonomous systems has matured to such a degree that the field is increasingly well-positioned to translate research into practical, stakeholder-driven use cases across well-defined domains. However, for a wide-scale practical adoption of autonomous systems, adherence to safety regulations is crucial. Many regulations are influenced by the Operational Design Domain (ODD), which defines the specific conditions in which an autonomous agent can function. This is especially relevant for Automated Driving Systems (ADS), as a dependable perception of ODD elements is essential for safe implementation and auditing. Vision-language models (VLMs) integrate visual recognition and language reasoning, functioning without task-specific training data, which makes them suitable for adaptable ODD perception. To assess whether VLMs can function as zero-shot "ODD sensors" that adapt to evolving definitions, we contribute (i) an empirical study of zero-shot ODD classification and detection using four VLMs on a custom dataset and Mapillary Vistas, along with failure analyses; (ii) an ablation of zero-shot optimization strategies with a cost-performance overview; and (iii) a suite of reusable prompting templates with guidance for adaptation. Our findings indicate that definition-anchored chain-of-thought prompting with persona decomposition performs best, while other methods may result in reduced recall. Overall, our results pave the way for transparent and effective ODD-based perception in safety-critical applications.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI