日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ディープフェイク検出arXiv:2607.03562

XPlainVerse: 説明可能なディープフェイク検出のための100万規模ベンチマーク

XPlainVerse: A Million-Scale Benchmark for Explainable Deepfake Detection

シェア:XThreadsFacebookLINEはてブBluesky

ディープフェイク検出モデルの説明が視覚的証拠に基づくかを評価する大規模ベンチマークを構築し、操作の実体と証拠を正しく特定するかを測る新指標を提案した。

詳しい要約

1. どんなもの?

XPlainVerseは、deepfake検出と人間中心の説明を統合した大規模ベンチマークである。100万枚の実画像と操作画像で構成され、実画像は5つの確立されたソースから、偽造画像は12の既製の画像編集・合成モデルによって生成される。技術的説明と簡易説明の2種類の説明スタイルを提供し、説明の推論忠実度を評価する新しい指標EntityScoreとEvidenceScoreを導入する。

2. 先行研究と比べてどこがすごい?

既存のベンチマークは主に分類精度を評価し、説明が実際の操作を反映しているかを考慮しない。XPlainVerseは、説明の根拠を視覚的アーティファクトに結びつけることを重視し、説明品質を測定可能な次元として確立する点で先行研究より進んでいる。また、大規模なデータセットと人間の注釈による検証を提供する。

3. 技術・手法の肝は?

手法の肝は、多段階フィルタリングパイプラインEdit-Checkを提案し、操作が意図した編集を満たしているかを検証して、信頼できる推論監視を大規模に可能にすること。さらに、専門家向けの技術的説明と非技術ユーザー向けの簡易説明の2つの補完的な説明スタイルを提供する。説明品質を評価するために、操作されたエンティティと視覚的証拠を正しく識別するかをチェックするEntityScoreとEvidenceScoreを新たに定義する。

4. どうやって有効だと検証した?

有効性の検証は、2,000の説明ペアに対する人間の注釈を用いて、データセット品質を人間の判断と照合して評価した。具体的な結果は要旨に明記されていないが、人間の判断との一致が確認されたと述べられている。

5. 議論はある?

要旨からは、説明の根拠が弱いという問題に対処するが、Edit-Checkのフィルタリングが操作の意図を完全に捉えられるか、EntityScoreとEvidenceScoreが人間の評価とどの程度相関するかなどの議論が考えられる。また、データセットの規模と多様性が実世界のdeepfakeの多様性をどの程度代表するかも議論の余地がある。

6. 次に読むべき論文は?

要旨で参照されている研究は明示されていないが、関連する分野として、deepfake detectionのベンチマーク(例:FaceForensics++)、説明可能なAI(XAI)の評価指標、画像編集・合成モデル(例:GANs、diffusion models)に関する論文が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Abhijeet Narang, Kartik Kuckreja, Shreya Ghosh, Muhammad Haris Khan, Jianfei Cai, Abhinav Dhall

分類: cs.CV

原文アブストラクト

As deepfake detection models increasingly produce natural language explanations, their reasoning often remains weakly grounded in visual artifacts, limiting reliability and user trust. Existing benchmarks mainly evaluate classification accuracy, overlooking whether explanations reflect the actual manipulations. This gap hinders progress toward deployable, explainable deepfake detection systems. To this end, we introduce XPlainVerse, a large-scale benchmark designed for joint deepfake detection and human-centered explanation. XPlainVerse comprises one million real and manipulated images, pairing authentic images from five established sources with forgeries generated by twelve off-the-shelf image editing and synthesis models. We further propose a multi-stage filtering pipeline, Edit-Check, to verify if manipulations satisfy their intended edits, enabling reliable reasoning supervision at scale. Beyond dataset scale, XPlainVerse provides two complementary explanation styles: technical explanations for expert analysis and simplified explanations optimized for non-technical users. To evaluate explanation quality beyond surface similarity, we propose novel metrics, EntityScore and EvidenceScore, that measure reasoning fidelity by checking whether explanations correctly identify manipulated entities and visual evidence. Human annotations on 2,000 explanation pairs validate our dataset quality against human judgment. We believe XPlainVerse will establish grounded explanation quality as a measurable dimension of deepfake detection and support scalable research on trustworthy, interpretable models.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI