神经脉冲响应场的声学体积渲染

捕捉精确声学现象的真实音频合成对于在虚拟和增强现实中创造沉浸式体验至关重要。在任意位置接收的声音合成依赖于脉冲响应（IR）的估计，该响应表征了声音在场景中沿不同路径传播后到达听者位置的特性。在本文中，我们提出了声学体积渲染（AVR），一种将体积渲染技术适配用于建模声学脉冲响应的新方法。虽然体积渲染在建模图像辐射度场和神经场景表示方面取得了成功，但脉冲响应作为时间序列信号具有独特的挑战。为解决这些挑战，我们引入了频域体积渲染，并使用球面积分来拟合脉冲响应测量。我们的方法构建了一个固有编码波传播原理的脉冲响应场，并在合成新姿态的脉冲响应方面达到了最先进的性能。实验表明AVR在大幅程度上超越了当前领先方法。此外，我们开发了一个声学仿真平台AcoustiX，其提供的脉冲响应仿真比现有仿真器更准确、更真实。AVR和AcoustiX的代码可在 https://zitonglan.github.io/avr 获取。