屏下摄像头图像重建的ISP无关方法
图像与视频处理
2021-11-03 v1 计算机视觉与模式识别
摘要
近年来，屏下摄像头被提出作为一种减小移动设备外形尺寸同时最大化屏幕面积的方法。不幸的是，将摄像头置于屏幕下方会导致显著的图像失真，包括对比度损失、模糊、噪声、色偏、散射伪影以及光灵敏度降低。在本文中，我们提出了一种与图像信号处理器（ISP）无关的图像复原流程，即它可以与任何现有的ISP结合，生成与使用相同ISP的常规摄像头外观相匹配的最终图像。这是通过一种执行RAW到RAW图像复原的深度学习方法实现的。为了获取具有足够对比度和场景多样性的真实屏下摄像头训练数据，我们还开发了一种利用HDR显示器的数据采集方法，以及一种生成合适HDR内容的数据增强方法。显示器数据辅以场景多样性较低但使我们能够实现精细细节恢复而不受显示器分辨率限制的真实世界数据。综合起来，该方法成功地恢复了色彩、对比度以及图像细节。
引用
@article{arxiv.2111.01511,
title = {ISP-Agnostic Image Reconstruction for Under-Display Cameras},
author = {Miao Qi and Yuqi Li and Wolfgang Heidrich},
journal= {arXiv preprint arXiv:2111.01511},
year = {2021}
}