对齐潜空间与图像空间以连接不可连接之物
计算机视觉与模式识别
2021-04-15 v1 人工智能
摘要
在这项工作中，我们开发了一种生成具有多样且复杂内容的无限高分辨率图像的方法。该方法基于一个完美等变生成器，在图像空间和潜空间中进行同步插值。潜码在采样时被定位在坐标网格上，每个像素由邻近风格码的插值计算得出。我们修改了AdaIN机制以在这种设置下工作，并在对抗设置中训练生成器，以产生位于任意两个潜向量之间的图像。在测试时，这允许生成复杂且多样的无限图像，并将任意两个不相关的场景连接成单个任意大的全景图。除此之外，我们引入了LHQ：一个包含\lhqsize张高分辨率自然风景的新数据集。我们在LHQ、LSUN Tower和LSUN Bridge上测试该方法，并在生成无限图像的质量和多样性方面至少以4倍优势超越基线。项目页面位于 https://universome.github.io/alis。
引用
@article{arxiv.2104.06954,
title = {Aligning Latent and Image Spaces to Connect the Unconnectable},
author = {Ivan Skorokhodov and Grigorii Sotnikov and Mohamed Elhoseiny},
journal= {arXiv preprint arXiv:2104.06954},
year = {2021}
}