中文

重新投射区域光照以实现阴影去除

计算机视觉与模式识别 2024-02-02 v1

摘要

去除阴影需要理解场景中的光照条件和物体纹理。现有方法通常学习阴影和非阴影图像之间的像素级颜色映射,其中光照和物体纹理的联合建模是隐式且不充分的。我们观察到,在阴影区域,物体纹理的退化程度取决于局部光照,而简单地增强局部光照无法完全恢复衰减的纹理。基于这一观察,我们提出在阴影区域中基于校正后的局部光照来恢复衰减的纹理。具体而言,我们首先设计了一个阴影感知分解网络,以显式估计阴影区域的光照层和反射层。然后,我们提出了一种新颖的双边校正网络,通过一种新颖的局部光照校正模块重新投射光照层中阴影区域的光照,并通过一种新颖的光照引导纹理恢复模块基于校正后的光照层恢复纹理。我们进一步为原本仅包含图像对的公开 SRD 数据集标注了像素级阴影掩码。在三个基准上的实验表明,我们的方法优于现有的 SOTA 阴影去除方法。

关键词

引用

@article{arxiv.2402.00341,
  title  = {Recasting Regional Lighting for Shadow Removal},
  author = {Yuhao Liu and Zhanghan Ke and Ke Xu and Fang Liu and Zhenwei Wang and Rynson W. H. Lau},
  journal= {arXiv preprint arXiv:2402.00341},
  year   = {2024}
}

备注

AAAI 2024 (Oral)