利用低频颜色先验评估辐射场的几何结构
计算机视觉与模式识别
2024-01-18 v2
摘要
辐射场是三维场景的一种有效表示,已广泛应用于新视角合成与三维重建。由于几乎不可能获得真实几何(即密度场)的真值,评估几何结构仍是一个开放且具有挑战性的问题。一种间接的替代方案是将密度场转换为点云,并计算其与扫描真值之间的倒角距离(Chamfer Distance)。然而,许多广泛使用的数据库并没有点云真值,因为扫描过程及相关设备昂贵且复杂。为此,我们提出一种名为逆平均残差颜色(Inverse Mean Residual Color, IMRC)的新度量,其仅利用观测图像即可评估几何结构。我们的核心洞察是:几何越好,所计算出的颜色场频率越低。基于该洞察,给定重建的密度场与观测图像,我们设计了一种闭式方法,用低频球谐函数逼近颜色场,并计算逆平均残差颜色。IMRC 越高,几何越好。定性与定量实验结果验证了我们所提 IMRC 度量的有效性。我们还使用 IMRC 对几种最先进(SOTA)方法进行了基准测试,以推动未来相关研究。我们的代码见 https://github.com/qihangGH/IMRC。
引用
@article{arxiv.2304.04351,
title = {Evaluate Geometry of Radiance Fields with Low-frequency Color Prior},
author = {Qihang Fang and Yafei Song and Keqiang Li and Li Shen and Huaiyu Wu and Gang Xiong and Liefeng Bo},
journal= {arXiv preprint arXiv:2304.04351},
year = {2024}
}
备注
This paper has been accepted by AAAI 2024