日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

画像検出arXiv:2605.27348

目がAIを裏切るとき:社会的視線の一貫性を意味的手がかりとしたAI生成画像検出

When Eyes Betray AI: Social Gaze Consistency as a Semantic Cue for AI-Generated Image Detection

シェア:XThreadsFacebookLINEはてブBluesky

生成画像の検出に、人物間の視線方向や頭と目の向き、瞳孔位置の相互一貫性という高次意味的手がかりを導入し、既存の低レベル特徴とは独立した検出軸を提案した。

詳しい要約

1. どんなもの?

- AI生成画像検出の新手法を提案 - 低レベルなアーティファクトではなく、高レベルな意味的手がかり「Social Gaze Consistency」を導入 - 対人相互作用における視線方向・頭眼アライメント・瞳孔配置の相互整合性と定義 - 既存の低レベルパラダイムと直交する未活用の検出軸 - 3つの連携メカニズムで実現 - 制御された診断データセット(領域特異的摂動、ペアレベル厳密グループ化) - Block-Compositional Caption Supervision(5ブロック推論骨格を1,250のマクロ結合キャプションで不変に保持) - クロスアーキテクチャ検証(FakeVLMとEffortで改善)

2. 先行研究と比べてどこがすごい?

- 従来の低レベルアーティファクト(ピクセル指紋、周波数異常、アップサンプリング痕跡)は、人物中心・部分編集設定でギャップが閉じられつつある - 本手法は高レベル意味的手がかりで、既存の低レベルパラダイムと直交 - 単一のinpainter(FLUX.1-Fill)で訓練してもマルチジェネレータスイートに転移 - バックボーン非依存の手がかりを実証 - 実クラスと偽クラスの再現率が同時に上昇し、「全て偽と予測」するアーティファクトを排除

3. 技術・手法の肝は?

- Social Gaze Consistency:視線方向・頭眼アライメント・瞳孔配置の相互整合性 - 3つの連携メカニズム - 制御された診断データセット:視線整合画像の領域特異的摂動、ペアレベル厳密グループ化で生成器指紋の記憶を防止 - Block-Compositional Caption Supervision:単一の5ブロック推論骨格を1,250のマクロ結合キャプションで不変に保持し、推論一貫性と表面多様性を分離 - クロスアーキテクチャ検証:同じ監督で視覚言語バックボーン(FakeVLM)と視覚のみバックボーン(Effort)を改善 - 4段階のメカニズム説明 - ペア編集ショートカット遮断 - 難→易難易度転移 - CLIP事前分布保持 - 拡散ファミリー共有の眼周囲構造におけるスペクトル弱点

4. どうやって有効だと検証した?

- 制御された診断データセットで領域特異的摂動を評価 - FakeVLMでCOCOAI Interactionサブセットのbalanced accuracyが67.8→71.5(+3.7 pp) - COCOAI Personサブセットで83.0→84.3(+1.3 pp) - 視覚のみバックボーン(Effort)でも一貫した改善 - 実クラスと偽クラスの再現率が同時に上昇 - 単一inpainter(FLUX.1-Fill)訓練がマルチジェネレータスイートに転移

5. 議論はある?

- 低レベルアーティファクトが閉じられつつある中で高レベル意味的手がかりの有効性を示す - バックボーン非依存の手がかりであることを実証 - 4段階のメカニズム説明を提示 - 単一inpainterからマルチジェネレータへの転移理由を説明 - コードは採択後に公開予定 - 限界や議論の詳細は要旨からは不明

6. 次に読むべき論文は?

- FakeVLM(視覚言語バックボーン) - Effort(視覚のみバックボーン) - FLUX.1-Fill(単一inpainter) - COCOAIデータセット - CLIP(事前分布保持の参照) - 拡散モデルファミリー(スペクトル弱点の参照)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jihyeon Kim, Sohee Kim, Soosan Lee, Souhwan Jung, James Matthew Rehg, Hyesong Choi

分類: cs.CV, cs.AI

原文アブストラクト

Recent generative models have largely closed the gap on low-level artifacts - pixel fingerprints, frequency anomalies, upsampling traces - particularly in person-centric and partial-edit settings where the manipulated region is small and surrounded by photometrically authentic content. We introduce Social Gaze Consistency, a high-level semantic cue defined as the mutual coherence of gaze direction, head-eye alignment, and pupil placement between interacting individuals, and show that it constitutes a previously underutilized detection axis orthogonal to existing low-level paradigms. We instantiate this insight through three coupled mechanisms: (i) a controlled diagnostic dataset with region-specific perturbations of gaze-consistent imagery, where strict pair-level grouping forecloses generator-fingerprint memorization as an optimization-time shortcut rather than relying on augmentation; (ii) Block-Compositional Caption Supervision, which holds a single 5-block reasoning skeleton invariant across 1,250 macro-combined captions, decoupling reasoning consistency from surface diversity; (iii) Cross-architecture validation showing the same supervision improves a vision-language backbone (FakeVLM) by +3.7 pp on the COCOAI Interaction subset (balanced accuracy 67.8 -> 71.5) and +1.3 pp on the COCOAI Person subset (83.0 -> 84.3), with consistent gains on a vision-only backbone (Effort), evidencing a backbone-agnostic cue. Real- and fake-class recalls rise simultaneously, ruling out a "predict-all-fake" artifact. A four-step mechanistic account - paired-edit shortcut blocking, hard-to-easy difficulty transfer, CLIP prior preservation, and diffusion-family shared spectral weakness in periocular structure - explains why training on a single inpainter (FLUX.1-Fill) transfers to multi-generator suites. We will release the code upon acceptance to facilitate reproducibility.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI