中文

SeCGAN:基于语义一致性的并行条件生成对抗网络人脸编辑

计算机视觉与模式识别 2022-06-17 v4

摘要

语义引导的条件生成对抗网络(cGAN)近年来成为人脸编辑的流行方法。然而,多数现有方法将语义掩码作为直接条件输入给生成器,且常需要目标掩码在 RGB 空间执行相应翻译。我们提出 SeCGAN,一种新颖的标签引导 cGAN,利用语义信息编辑人脸图像而无需指定目标语义掩码。训练时,SeCGAN 有两条并行运行的生成器与判别器分支,一条训练用于翻译 RGB 图像,另一条用于语义掩码。为以互利方式桥接两分支,我们引入语义一致性损失,约束两分支具有一致的语义输出。尽管训练时两分支均需要,RGB 分支是我们的主网络,推理时不需要语义分支。我们在 CelebA 和 CelebA-HQ 上的结果表明,我们的方法能生成具有更准确属性的面部图像,在目标属性识别率上优于竞争基线,同时保持自监督 Fréchet Inception Distance 和 Inception Score 等质量指标。

关键词

引用

@article{arxiv.2111.09298,
  title  = {SeCGAN: Parallel Conditional Generative Adversarial Networks for Face Editing via Semantic Consistency},
  author = {Jiaze Sun and Binod Bhattarai and Zhixiang Chen and Tae-Kyun Kim},
  journal= {arXiv preprint arXiv:2111.09298},
  year   = {2022}
}

备注

Accepted by AI for Content Creation (AI4CC) workshop at CVPR 2022