中文

Sharp-NeRF:基于清晰度先验的网格快速去模糊神经辐射场

计算机视觉与模式识别 2024-01-02 v1 图形学 图像与视频处理

摘要

神经辐射场(NeRF)在基于神经渲染的新视角合成中表现出色。然而,当输入图像在不完美条件下(如光照不足、散焦模糊和镜头像差)拍摄时,NeRF会出现严重的视觉质量下降。尤其是,使用相机正常拍摄的图像中散焦模糊非常常见。尽管最近有少数研究提出渲染高质量清晰图像,但它们仍面临许多关键挑战。特别是,这些方法采用了基于多层感知器(MLP)的NeRF,需要大量的计算时间。为了克服这些缺点,本文提出了一种新技术Sharp-NeRF——一种基于网格的NeRF,能在半小时训练内从输入模糊图像中渲染出干净清晰的图像。为此,我们使用了多个基于网格的核来精确建模场景的清晰度/模糊度。计算像素的清晰度水平以学习空间变化的模糊核。我们在包含模糊图像的基准上进行了实验,并评估了全参考和无参考指标。定性和定量结果表明,我们的方法渲染出具有生动色彩和精细细节的清晰新视角,并且训练时间比先前工作快得多。我们的项目页面位于https://benhenryl.github.io/SharpNeRF/。

关键词

引用

@article{arxiv.2401.00825,
  title  = {Sharp-NeRF: Grid-based Fast Deblurring Neural Radiance Fields Using Sharpness Prior},
  author = {Byeonghyeon Lee and Howoong Lee and Usman Ali and Eunbyung Park},
  journal= {arXiv preprint arXiv:2401.00825},
  year   = {2024}
}

备注

Accepted to WACV 2024