通过动态跳跃连接网络去除屏下摄像头的衍射图像伪影
计算机视觉与模式识别
2021-04-21 v1 图像与视频处理
摘要
近期屏下摄像头（UDC）系统的发展为智能手机（以及电视、笔记本、平板）提供了真正的无边框、无刘海视觉体验，同时允许从嵌入下方的自拍摄像头捕获图像。在典型 UDC 系统中，半透明有机发光二极管（OLED）像素阵列的微结构衰减并衍射到达摄像头的入射光，导致显著的图像质量退化。UDC 图像中常可观察到噪声、眩光、雾感和模糊。本工作中，我们旨在分析并解决上述退化问题。我们定义基于物理的图像形成模型以更好理解该退化。此外，我们利用全球首批商用 UDC 智能手机原型之一测量 UDC 系统的真实世界点扩散函数（PSF），并提供基于模型的数据合成流程以生成真实退化的图像。我们专门设计了一个新的领域知识驱动的动态跳跃连接网络（DISCNet）来复原 UDC 图像。我们通过在合成与真实 UDC 数据上的大量实验证明了方法的有效性。我们基于物理的图像形成模型与所提 DISCNet 可为 UDC 图像复原乃至更广义上一般衍射伪影去除的进一步探索提供基础。
引用
@article{arxiv.2104.09556,
title = {Removing Diffraction Image Artifacts in Under-Display Camera via Dynamic Skip Connection Network},
author = {Ruicheng Feng and Chongyi Li and Huaijin Chen and Shuai Li and Chen Change Loy and Jinwei Gu},
journal= {arXiv preprint arXiv:2104.09556},
year = {2021}
}
备注
CVPR 2021 camera-ready version