BGGAN:用于渲染真实散景的散景玻璃生成对抗网络
计算机视觉与模式识别
2021-04-13 v1 图像与视频处理
摘要
带有散景效果拍摄的照片通常意味着聚焦物体清晰而失焦区域全部模糊。单反相机(DSLR)可轻松自然渲染此类效果。然而,受限于传感器,智能手机无法直接捕获具有景深效果的图像。本文中,我们提出一种称为Glass-Net的新颖生成器,其不依赖复杂硬件即可生成散景图像。同时,在模型微调阶段结合基于GAN的方法与感知损失以渲染真实散景效果。此外,实例归一化(IN)在我们的网络中重新实现,确保我们带IN的tflite模型可在智能手机GPU上加速。实验表明,我们的方法能够渲染高质量散景效果,并在所有智能手机芯片组上以1.9秒处理一张 像素图像。该方法在AIM 2020渲染真实散景挑战赛Track 1与Track 2中均获第一。
引用
@article{arxiv.2011.02242,
title = {BGGAN: Bokeh-Glass Generative Adversarial Network for Rendering Realistic Bokeh},
author = {Ming Qian and Congyu Qiao and Jiamin Lin and Zhenyu Guo and Chenghua Li and Cong Leng and Jian Cheng},
journal= {arXiv preprint arXiv:2011.02242},
year = {2021}
}
备注
accepted by ECCV workshop 2020