语义感知的图像到图像翻译与域迁移
计算机视觉与模式识别
2021-03-02 v2
摘要
图像到图像翻译是将图像从源域迁移到不同（但相关）目标域的问题。我们提出了一种利用底层语义信息进行对象变形和域迁移任务的新型无监督图像到图像翻译技术。具体而言，我们提出了一种生成对抗学习方法，联合将源域的图像和标签翻译到目标域。我们的主要技术贡献是一个基于编码器-解码器的网络架构，该架构联合编码图像及其底层语义，并将二者分别翻译到目标域。此外，我们提出了保留语义标签的对象变形损失和跨域语义一致性损失。通过广泛的实验评估，我们证明了与无监督图像到图像翻译、域自适应和对象变形方面的最先进方法相比，我们方法的有效性。
引用
@article{arxiv.1904.02203,
title = {Semantics-Aware Image to Image Translation and Domain Transfer},
author = {Pravakar Roy and Nicolai Häni and Jun-Jee Chao and Volkan Isler},
journal= {arXiv preprint arXiv:1904.02203},
year = {2021}
}