通过结构化噪声注入实现解耦图像生成
计算机视觉与模式识别
2020-05-06 v2
摘要
我们探索了将噪声注入生成对抗网络(GANs)的不同设计选择,以解耦潜空间为目标。与传统方法不同,我们提出分别通过独立的全连接层馈入多个噪声编码。其目的是限制每个噪声编码对生成图像特定部分的影响。我们表明,生成器网络第一层中的解耦会导致生成图像中的解耦。通过基于网格的结构,我们实现了多方面的解耦,且未使网络结构复杂化,也无需标签。我们实现了空间解耦、尺度空间解耦,以及前景对象与背景风格的解耦,从而允许对生成图像进行细粒度控制。示例包括改变人脸图像中的面部表情、鸟图像中的喙长,以及汽车图像中的汽车尺寸。经验上,这在 FFHQ 数据集上取得了优于最先进方法的解耦分数。
引用
@article{arxiv.2004.12411,
title = {Disentangled Image Generation Through Structured Noise Injection},
author = {Yazeed Alharbi and Peter Wonka},
journal= {arXiv preprint arXiv:2004.12411},
year = {2020}
}
备注
CVPR2020 Oral. Project page: https://github.com/yalharbi/StructuredNoiseInjection