利用多参考通过真实感风格迁移现代化老照片
计算机视觉与模式识别
2023-04-11 v1 图形学
摘要
本文首次以统一方式执行风格化与增强,利用多参考进行老照片现代化。为现代化老照片,我们提出一种新颖的基于多参考的老照片现代化(MROPM)框架,由网络 MROPM-Net 与一种新颖的合成数据生成方案组成。MROPM-Net 通过真实感风格迁移(PST)利用多参考对老照片进行风格化,并进一步增强结果以生成具现代外观的图像。同时,合成数据生成方案训练网络以有效利用多参考执行现代化。为评估性能,我们提出一个新的老照片基准数据集(CHD),由多样的天然室内与室外场景组成。大量实验表明,所提方法在真实老照片上执行现代化优于其他基线,尽管训练期间未使用任何老照片。此外,我们的方法可针对老照片中每个语义区域从多参考中适当选择风格,以进一步提升现代化性能。
引用
@article{arxiv.2304.04461,
title = {Modernizing Old Photos Using Multiple References via Photorealistic Style Transfer},
author = {Agus Gunawan and Soo Ye Kim and Hyeonjun Sim and Jae-Ho Lee and Munchurl Kim},
journal= {arXiv preprint arXiv:2304.04461},
year = {2023}
}
备注
Accepted to CVPR 2023. Website: https://kaist-viclab.github.io/old-photo-modernization