中文

利用单张图像对 GAN 进行纹理化

计算机视觉与模式识别 2023-03-14 v2

摘要

我们能否定制一个深度生成模型,使其生成的图像能够匹配某给定图像的纹理?当你看到一张教堂的图像时,你可能会想知道能否得到该教堂的类似图片。这里我们提出一种方法,利用一张参考图像对 GAN 进行适配,之后我们便能生成具有与给定图像相似纹理的图像。具体而言,我们在用户给定参考图像的引导下修改预训练 GAN 模型的权重。我们使用块判别器对抗损失来促使模型输出匹配给定图像上的纹理,同时使用拉普拉斯对抗损失来确保多样性与真实感,并缓解两个损失之间的矛盾。实验表明,所提方法能使 GAN 的输出匹配给定图像的纹理,同时保持多样性与真实感。

关键词

引用

@article{arxiv.2302.10600,
  title  = {Texturize a GAN Using a Single Image},
  author = {Pengda Xiang and Sitao Xiang and Yajie Zhao},
  journal= {arXiv preprint arXiv:2302.10600},
  year   = {2023}
}

备注

This paper is still in the process of improving, a revised version may be released in the future