解耦夜间镜头光晕:基于自监督生成的镜头光晕去除
计算机视觉与模式识别
2025-02-18 v1
摘要
镜头光晕源于传感器阵列内的光反射和折射,其类型多样,包括光晕、遮蔽眩光、反射光晕等。现有方法仅专门针对某一特定类型,忽略了多种类型镜头光晕同时发生的情况,而这在现实世界中很常见,例如来自同一光源的光晕和位移反射共存。这种共现的镜头光晕无法通过单独光晕去除方法的简单组合来有效解决,因为这些共存的光晕源于同一光源并在同一传感器阵列内同时生成,表现出复杂的相互依赖性而非简单的叠加关系。为了建模这种相互依赖的光晕关系,我们的夜间镜头光晕形成模型首次尝试学习成像平面上光晕之间的内在物理关系。基于该物理模型,我们引入了一种解决联合光晕去除任务的方案,命名为基于自监督生成的镜头光晕去除网络(SGLFR-Net),该网络无需预训练即可实现自监督。具体而言,基于 PSF 渲染先验在 PSF 渲染网络(PSFR-Net)中解耦夜间光晕,而在基于纹理先验的反射光晕去除网络(TPRR-Net)中对反射光晕进行建模。实证评估表明,所提出的方法在联合和单独光晕去除任务中均具有有效性。
引用
@article{arxiv.2502.10714,
title = {Disentangle Nighttime Lens Flares: Self-supervised Generation-based Lens Flare Removal},
author = {Yuwen He and Wei Wang and Wanyu Wang and Kui Jiang},
journal= {arXiv preprint arXiv:2502.10714},
year = {2025}
}
备注
9 pages,Accepted by AAAI2025