支持便捷编辑的频调试点云渲染
计算机视觉与模式识别
2023-03-21 v2
摘要
我们开发了一种用于新视角合成的高效点云渲染流水线,其可实现高保真局部细节重建、实时渲染及用户友好编辑。该流水线的核心是称为自适应频率网络(AFNet)的自适应频率调制模块,其利用超网络学习局部纹理频率编码,并连续注入自适应频率激活层以调制隐式辐射信号。该机制以较小的计算开销,通过更丰富的频率基支持提升了网络的频率表达能力。为进一步提升性能,还提出了一种通过点不透明度估计进行点云几何优化的预处理模块。与隐式渲染不同,我们的流水线支持基于点云操控的高保真交互式编辑。在 NeRF-Synthetic、ScanNet、DTU 和 Tanks and Temples 数据集上的大量实验结果表明,相较最先进技术,我们的方法在 PSNR、SSIM 和 LPIPS 方面取得了更优性能。
引用
@article{arxiv.2303.07596,
title = {Frequency-Modulated Point Cloud Rendering with Easy Editing},
author = {Yi Zhang and Xiaoyang Huang and Bingbing Ni and Teng Li and Wenjun Zhang},
journal= {arXiv preprint arXiv:2303.07596},
year = {2023}
}
备注
Accepted by CVPR 2023