中文

SepMark:用于统一来源追溯与 Deepfake 检测的深度可分离水印

计算机视觉与模式识别 2023-08-02 v2 多媒体 图像与视频处理

摘要

恶意 Deepfake 已导致在区分真实与伪造人脸之间出现尖锐冲突。尽管已开发许多事后检测 Deepfake 的对策,但无疑被动取证未对可预见操控前原始人脸考虑任何预防措施。为完善该取证生态,我们提出名为 SepMark 的主动解决方案,其提供来源追溯与 Deepfake 检测的统一框架。SepMark 源于基于编码器-解码器的深度水印,但具有两个可分离解码器。深度可分离水印 SepMark 首次为既有的深度水印研究带来新范式:单一编码器优雅地嵌入一个水印,而两个解码器可在不同鲁棒性层级分别提取该水印。称为 Tracer 的鲁棒解码器抵御各类失真,可能具有过高鲁棒性,使水印在 Deepfake 前后均存活。称为 Detector 的半鲁棒解码器对恶意失真选择性敏感,使水印在 Deepfake 后消失。仅由 Tracer 与 Detector 构成的 SepMark 能可靠追溯被标记人脸的可信来源并检测其自标记后是否被篡改;二者单独均无法达成。大量实验证明了所提 SepMark 在典型 Deepfake(包括换脸、表情重演与属性编辑)上的有效性。

关键词

引用

@article{arxiv.2305.06321,
  title  = {SepMark: Deep Separable Watermarking for Unified Source Tracing and Deepfake Detection},
  author = {Xiaoshuai Wu and Xin Liao and Bo Ou},
  journal= {arXiv preprint arXiv:2305.06321},
  year   = {2023}
}

备注

Accepted by ACM MM 2023