基于判别器-生成器通信的引导式图像到图像翻译
计算机视觉与模式识别
2023-03-08 v1 图像与视频处理
摘要
图像到图像（I2I）翻译的目标是将图像从源域迁移到目标域，近来受到越来越多的关注。该研究的一个主要分支是基于生成对抗网络（GAN）来构建 I2I 翻译。作为一种零和博弈，GAN 可被重构为针对生成器的部分可观测马尔可夫决策过程（POMDP），其中生成器无法获取其环境的完整状态信息。这一表述说明了 GAN 训练中的信息不充分问题。为缓解该问题，我们提出在判别器与生成器之间添加通信信道。我们探索了多种架构设计，将通信机制整合进 I2I 翻译框架。为验证所提方法的性能，我们在多个基准数据集上进行了大量实验。实验结果证实了我们所提方法的优越性。
引用
@article{arxiv.2303.03598,
title = {Guided Image-to-Image Translation by Discriminator-Generator Communication},
author = {Yuanjiang Cao and Lina Yao and Le Pan and Quan Z. Sheng and Xiaojun Chang},
journal= {arXiv preprint arXiv:2303.03598},
year = {2023}
}