日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

データセットarXiv:2603.16303

イベント強化型視覚自律認識のための深層表現学習に向けて:eAPデータセット

Toward Deep Representation Learning for Event-Enhanced Visual Autonomous Perception: the eAP Dataset

シェア:XThreadsFacebookLINEはてブBluesky

イベントカメラを用いた自律運転認識のための大規模データセットeAPを構築し、3D車両検出や衝突時間推定タスクでの有効性を示した。

詳しい要約

1. どんなもの?

- イベントカメラを用いた自律走行向け大規模データセット「eAP (event-enhanced Autonomous Perception)」を提案。 - 3D vehicle detectionとobject time-to-contact (TTC) estimationのタスクを深層表現学習で研究可能。 - 挑戦的な照明条件下での知覚性能向上を目的とする。

2. 先行研究と比べてどこがすごい?

- 従来の視覚自律知覚システムは深層表現学習で高い性能を達成するが、厳しい照明条件で失敗。 - イベントカメラはこの問題を緩和できるが、自律走行シーンでの大規模データセットが不足。 - eAPはイベントカメラを用いた自律知覚用データセットとして最大規模。

3. 技術・手法の肝は?

- イベントカメラデータを含む大規模データセットを構築。 - 3D vehicle detectionとobject TTC estimationのための深層表現学習を可能にする。 - TTC推定ではgeometry-aware representation learningフレームワークを採用。

4. どうやって有効だと検証した?

- eAPを用いて、挑戦的な照明シナリオで人気の3D vehicle detectionネットワークをイベントが改善することを初めて成功裏に示した。 - object TTC estimationの表現学習問題に専念した研究を可能にし、200 FPSで動作する最高のイベントベースTTC推定ネットワークを実現。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。同分野の定番として、event-based vision、3D vehicle detection、time-to-contact estimationに関する論文が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jinghang Li, Shichao Li, Qing Lian, Peiliang Li, Xiaozhi Chen, Yi Zhou

分類: cs.RO

原文アブストラクト

Recent visual autonomous perception systems achieve remarkable performances with deep representation learning. However, they fail in scenarios with challenging illumination.While event cameras can mitigate this problem, there is a lack of a large-scale dataset to develop event-enhanced deep visual perception models in autonomous driving scenes. To address the gap, we present the eAP (event-enhanced Autonomous Perception) dataset, the largest dataset with event cameras for autonomous perception. We demonstrate how eAP can facilitate the study of different autonomous perception tasks, including 3D vehicle detection and object time-to-contact (TTC) estimation, through deep representation learning. Based on eAP, we demonstrate the ffrst successful use of events to improve a popular 3D vehicle detection network in challenging illumination scenarios. eAP also enables a devoted study of the representation learning problem of object TTC estimation. We show how a geometryaware representation learning framework leads to the best eventbased object TTC estimation network that operates at 200 FPS. The dataset, code, and pre-trained models will be made publicly available for future research.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI