中文

GAN 伪造图像中伪影的检测与模拟

计算机视觉与模式识别 2019-10-17 v2 图像与视频处理

摘要

为检测 GAN 生成的图像,传统的监督式机器学习算法需要从目标 GAN 模型中收集一定数量的真实与伪造图像。然而,攻击者使用的具体模型通常不可用。为此,我们提出了一种 GAN 模拟器 AutoGAN,可模拟多种流行 GAN 模型共享的通用流水线所产生的伪影。此外,我们识别出由该通用 GAN 流水线中包含的上采样组件引起的独特伪影。我们从理论上证明此类伪影表现为频域中频谱的复制,从而提出一种基于频谱输入而非像素输入的分类器模型。通过使用模拟图像训练基于频谱的分类器,即便在训练期间未见到目标 GAN 模型生成的伪造图像,我们的方法在检测如 CycleGAN 等流行 GAN 模型生成的伪造图像上仍达到了最先进的性能。

关键词

引用

@article{arxiv.1907.06515,
  title  = {Detecting and Simulating Artifacts in GAN Fake Images},
  author = {Xu Zhang and Svebor Karaman and Shih-Fu Chang},
  journal= {arXiv preprint arXiv:1907.06515},
  year   = {2019}
}

备注

This is an extended version of our original AutoGAN paper which will be appeared in WIFS 2019