中文

DIFAI:基于 StyleGAN 反演的多样化人脸修复

计算机视觉与模式识别 2023-01-23 v1

摘要

图像修复是计算机视觉中的一个经典问题,旨在恢复被遮挡区域并补全受损图像。在人脸图像修复任务中,大多数方法对每个被掩码图像仅生成一种结果,尽管还存在其他合理的可能。为避免仅生成单张图像所带来的潜在偏差与不自然的约束,我们提出了一种利用 StyleGAN 嵌入空间进行多样化人脸修复的新框架。我们的框架采用 pSp 编码器与 SeFa 算法来识别 StyleGAN 嵌入的语义分量,并将其输入我们提出的 SPARN 解码器,该解码器采用区域归一化以实现合理的修复。我们证明了所提方法优于多种当前最优(SOTA)方法。

关键词

引用

@article{arxiv.2301.08443,
  title  = {DIFAI: Diverse Facial Inpainting using StyleGAN Inversion},
  author = {Dongsik Yoon and Jeong-gi Kwak and Yuanming Li and David Han and Hanseok Ko},
  journal= {arXiv preprint arXiv:2301.08443},
  year   = {2023}
}

备注

ICIP 2022