单球镜镜中的神经辐射场用于新视角综述

在胃部诊断中，从预捕获的单球镜图像中实现对任意新视角图像的合成是一个有前景的主题。典型方法通过整合结构从运动 (SfM) 和泊松表面重建等传统3D重建技术来实现此目标。这些方法产生显式3D表示，如点云和网格，从而支持从新视角渲染图像。然而，胃内存在低纹理和非Lambertian区域，常导致点云和网格重建噪声且不完整，阻碍高质量图像渲染。本文将新兴的神经辐射场 (NeRF) 技术应用于单球镜数据，用于合成新视角的逼真图像。为解决因单球镜局部视角稀疏导致的性能下降，我们将来自预重建点云的几何先验纳入训练，以引入几何损失，用于观察到的预捕获视图和生成的未观察视图。与其他最新NeRF方法相比，我们的方法在定性和定量分析方面都表现出从胃内新视角获得的高保真图像渲染。