中文

LatentSwap:一种高效的人脸交换潜在代码映射框架

计算机视觉与模式识别 2024-03-05 v2

摘要

我们提出了 LatentSwap,这是一种简单的人脸交换框架,用于生成给定生成器的人脸交换潜在代码。利用随机采样的潜在代码,我们的框架轻量级,除了使用预训练模型外不需要数据集,训练过程也快速且直接。损失目标仅包含三项,能有效控制源图像与目标图像之间的人脸交换结果。通过附加一个独立于模型的预训练 GAN 反演模型并使用 StyleGAN2 生成器,我们的模型产生了与其他竞争性人脸交换模型相当的逼真高分辨率图像。我们表明,我们的框架适用于其他生成器(如 StyleNeRF),为 3D 感知人脸交换铺平了道路,并且兼容其他下游 StyleGAN2 生成器任务。源代码和模型可在 \url{https://github.com/usingcolor/LatentSwap} 找到。

关键词

引用

@article{arxiv.2402.18351,
  title  = {LatentSwap: An Efficient Latent Code Mapping Framework for Face Swapping},
  author = {Changho Choi and Minho Kim and Junhyeok Lee and Hyoung-Kyu Song and Younggeun Kim and Seungryong Kim},
  journal= {arXiv preprint arXiv:2402.18351},
  year   = {2024}
}

备注

9 pages, 11 figures