一种用于图像风格迁移的内容变换模块
计算机视觉与模式识别
2020-03-20 v1
摘要
风格迁移近来受到大量关注,因其允许研究图像理解与合成中的基本挑战。近期工作在色彩与纹理表征、计算速度及图像分辨率上取得显著改进。然而,图像内容的显式变换大多被忽视:尽管艺术风格影响图像的形式特征,如色彩、形状或纹理,其亦会使内容细节变形、添加或移除。本文显式聚焦于内容图像的内容与风格感知风格化。为此,我们在编码器与解码器间引入一个内容变换模块。此外,我们利用照片与风格样本中出现的相似内容来学习风格如何改变内容细节,并将其推广至其他类别细节。另外,本工作提出一种对高分辨率图像合成至关重要的新型归一化层。我们模型的鲁棒性与速度实现了实时高清视频风格化。我们进行了广泛的定性与定量评估以证明方法的有效性。
引用
@article{arxiv.2003.08407,
title = {A Content Transformation Block For Image Style Transfer},
author = {Dmytro Kotovenko and Artsiom Sanakoyeu and Pingchuan Ma and Sabine Lang and Björn Ommer},
journal= {arXiv preprint arXiv:2003.08407},
year = {2020}
}
备注
Accepted to CVPR 2019