実物か偽物かを超えて:写真評価のための二チャネル真正性・推論プロトコル
Beyond Real or Fake: A Dual-Channel Authenticity and Reasoning Protocol for Photographic Assessment
画像の真正性をカメラ由来の指紋と意味的な整合性の二つのチャネルで捉え、4クラス分類と説明生成を同時に行う2CAPを提案した論文。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Xiaoxiao Li, Ruinan Jin, Lili Meng, Miaosen Wang, Athula Balachandran, Pei Cao
分類: cs.CV
原文アブストラクト
Forensic verification has converged on a binary "real vs. fake" label that confates fully synthetic, tampered, and AI-retouched images despite their very different consequences. We argue that GenAI manipulations decompose along two complementary channels: a camera channel of sensor fingerprints (destroyed by neural processing), and a semantic channel of scene-level coherence (disrupted by content edits). Each manipulation type leaves a distinctive two-channel signature. We instantiate this taxonomy in 2CAP (2-Channel Authenticity Protocol), pairing a contrastively-trained camera encoder with a frozen semantic encoder to serve two applications on a shared backbone: (i) four-class authenticity classification via cross-attention fusion with learnable reliability weights; and (ii) evidence generation, where an authentic image serves as a reference for a query and the two encoders produce per-channel alignment scores together with a patch-level saliency map. These signals are supplied as privileged context to a frozen Vision-Language Model (VLM) through an Observe-Generate-Refine loop, yielding explanations with localization without forensic fine-tuning. On a multi-source benchmark, 2CAP attains the best classification performance, including strong retouching detection where existing methods fail, and improves explanation quality.
関連論文
- 確率制約付き逐次相互作用による画像改ざん位置特定画像フォレンジック
- 順序依存クロスブランチ相互作用による画像改ざん位置特定画像フォレンジック
- エージェント型画像フォレンジックの解剖:トリアージ、プロンプティング、証拠仲裁の役割画像フォレンジック
- MoE-JEPA:意味事前知識と高周波痕跡を統合した合成画像フォレンジック画像フォレンジック
- テキスト中心画像フォレンジックのための証拠誘導型検出・位置特定・説明システム画像フォレンジック
- 検出から位置特定へ:完全合成画像と改ざん画像のための統合フォレンジックフレームワーク画像フォレンジック
