探究基于风格的图像翻译中的整流器
计算机视觉与模式识别
2021-11-24 v2 图像与视频处理
摘要
尽管现代图像翻译技术能够生成逼真合成图像，但其风格可控性有限，因此可能受到翻译误差的影响。在本工作中，我们表明激活函数是控制图像合成方向的关键组件之一。具体而言，我们明确证明了整流器的斜率参数能够改变数据分布，并可独立用于控制翻译的方向。为提高风格可控性，我们提出了两种简单而有效的技术，包括自适应ReLU（AdaReLU）与结构自适应函数。AdaReLU可根据目标风格动态调整斜率参数，并可与自适应实例归一化（AdaIN）结合使用以增强可控性。同时，结构自适应函数使整流器能更有效地操纵特征图的结构。它由所提出的结构卷积（StruConv）组成，这是一个高效的卷积模块，能够根据AdaIN指定的均值与方差选择待激活的区域。大量实验表明，所提出的技术可大幅提升基于风格的图像翻译任务中的网络可控性与输出多样性。
引用
@article{arxiv.2111.10546,
title = {Delving into Rectifiers in Style-Based Image Translation},
author = {Yipeng Zhang and Bingliang Hu and Hailong Ning and Quang Wang},
journal= {arXiv preprint arXiv:2111.10546},
year = {2021}
}
备注
14 pages,14 figures