日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

データクリーニングarXiv:2507.12414

AutoVDC: 視覚言語モデルを用いた自動視覚データクリーニング

AutoVDC: Automated Vision Data Cleaning Using Vision-Language Models

シェア:XThreadsFacebookLINEはてブBluesky

視覚言語モデルを活用し、自動運転用の物体検出データセットに含まれる誤ったアノテーションを自動検出してデータ品質を向上させるフレームワークを提案し、KITTIとnuImagesで有効性を検証した。

詳しい要約

1. どんなもの?

- 自動運転向け vision dataset の誤アノテーションを Vision-Language Models (VLMs) で自動検出する AutoVDC (Automated Vision Data Cleaning) framework の提案。 - 人手による大規模データセットのレビューは労力とコストが大きいという課題に対し、VLMs を用いて誤りを特定し、ユーザーが除去してデータ品質を高めることを狙う。 - 対象は object detection benchmark を含む KITTI と nuImages。

2. 先行研究と比べてどこがすごい?

- 先行研究との具体的な比較は要旨からは不明。 - 人手アノテーションの不完全性と反復的な品質改善コストという既存課題に対し、VLMs による自動誤り検出で大規模データセットのレビューを効率化する点を主張。 - 複数 VLM 間の検出率比較と VLM fine-tuning の影響も検討している点が特徴として示される。

3. 技術・手法の肝は?

- Vision-Language Models (VLMs) を活用し、vision dataset 内の erroneous annotations を自動的に識別する pipeline を構築。 - 検出結果を基にユーザーが誤りを除去し、データ品質を改善する運用を想定。 - VLM fine-tuning が pipeline に与える影響も検証対象に含む。 - 具体的なモデル構成や前処理・後処理の詳細は要旨からは不明。

4. どうやって有効だと検証した?

- KITTI と nuImages の object detection benchmark を用いて検証。 - 意図的に erroneous annotations を注入した dataset variants を作成し、error detection rate を測定。 - 異なる VLMs 間で detection rates を比較。 - VLM fine-tuning の影響を探索し、error detection と data cleaning 実験で高い性能を示したと報告。

5. 議論はある?

- 大規模 production datasets の信頼性と精度向上への潜在的可能性を主張。 - 限界や失敗事例、計算コスト、fine-tuning の詳細な議論は要旨からは不明。 - 注入誤りによる評価のため、実データの複雑な誤り分布への一般化は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない。 - 関連手法として Vision-Language Models (VLMs)、object detection、KITTI、nuImages に関する論文を挙げる。 - 同分野の定番として data cleaning / annotation quality に関する研究や autonomous driving 向け dataset 品質管理の文献を次に読む候補とする。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Santosh Vasa, Aditi Ramadwar, Jnana Rama Krishna Darabattula, Md Zafar Anwar, Stanislaw Antol, Andrei Vatavu, Thomas Monninger, Sihao Ding

分類: cs.CV, cs.AI, cs.LG, cs.RO

原文アブストラクト

Training of autonomous driving systems requires extensive datasets with precise annotations to attain robust performance. Human annotations suffer from imperfections, and multiple iterations are often needed to produce high-quality datasets. However, manually reviewing large datasets is laborious and expensive. In this paper, we introduce AutoVDC (Automated Vision Data Cleaning) framework and investigate the utilization of Vision-Language Models (VLMs) to automatically identify erroneous annotations in vision datasets, thereby enabling users to eliminate these errors and enhance data quality. We validate our approach using the KITTI and nuImages datasets, which contain object detection benchmarks for autonomous driving. To test the effectiveness of AutoVDC, we create dataset variants with intentionally injected erroneous annotations and observe the error detection rate of our approach. Additionally, we compare the detection rates using different VLMs and explore the impact of VLM fine-tuning on our pipeline. The results demonstrate our method's high performance in error detection and data cleaning experiments, indicating its potential to significantly improve the reliability and accuracy of large-scale production datasets in autonomous driving.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI