GS-Octree：基于八叉树的3D高斯溅射用于强光照下的鲁棒物体级3D重建
计算机视觉与模式识别
2024-06-27 v1
摘要
3D高斯溅射技术显著推进了从多视角图像构建辐射场的发展，实现了实时渲染。虽然基于点的光栅化有效降低了渲染的计算需求，但它通常难以准确重建目标物体的几何结构，尤其是在强光照条件下。为了应对这一挑战，我们提出了一种新颖的方法，将基于八叉树的隐式表面表示与高斯溅射相结合。我们的方法包含四个阶段。首先，它通过体渲染重建一个符号距离场（SDF）和一个辐射场，并将其编码在低分辨率八叉树中。初始的SDF代表了目标物体的粗略几何结构。随后，它引入3D高斯作为额外的自由度，并由SDF引导。在第三阶段，优化后的高斯进一步提高了SDF的精度，使其能够恢复比第一阶段获得的初始SDF更精细的几何细节。最后，它采用精炼后的SDF通过溅射进一步优化3D高斯，剔除那些对视觉外观贡献不大的高斯。实验结果表明，我们的方法利用3D高斯与SDF的分布，能够重建更精确的几何结构，尤其是在由强光照引起镜面高光的图像中。
引用
@article{arxiv.2406.18199,
title = {GS-Octree: Octree-based 3D Gaussian Splatting for Robust Object-level 3D Reconstruction Under Strong Lighting},
author = {Jiaze Li and Zhengyu Wen and Luo Zhang and Jiangbei Hu and Fei Hou and Zhebin Zhang and Ying He},
journal= {arXiv preprint arXiv:2406.18199},
year = {2024}
}