中文

WavePlanes:用于动态新视角合成的紧凑六平面

计算机视觉与模式识别 2024-12-24 v4 图形学

摘要

动态新视角合成增强了 NVS 技术以对运动的 3D 场景进行建模。然而,当前的方法资源密集且难以压缩。为了解决这个问题,我们提出了 WavePlanes,一种快速且更紧凑的六平面表示,适用于神经辐射场和高斯溅射方法。我们没有像以前那样分别对许多特征尺度进行建模,而是使用逆离散小波变换来重建不同尺度的特征。这带来了更紧凑的表示,并允许我们探索基于小波的压缩方案以获得进一步的收益。所提出的压缩方案利用小波系数的稀疏性,对小波平面应用硬阈值,并将非零系数及其在每个平面上的位置存储在哈希图中。与最先进的方法相比,WavePlanes 明显更小,资源需求更少,并且在重建质量上具有竞争力。与小型 SotA 模型相比,WavePlanes 在模型大小和新视角质量上均优于现有方法。

关键词

引用

@article{arxiv.2312.02218,
  title  = {WavePlanes: Compact Hex Planes for Dynamic Novel View Synthesis},
  author = {Adrian Azzarelli and Nantheera Anantrasirichai and David R Bull},
  journal= {arXiv preprint arXiv:2312.02218},
  year   = {2024}
}