神经声学上下文场:利用神经场渲染真实房间脉冲响应
声音
2023-09-29 v1 计算机视觉与模式识别
音频与语音处理
摘要
房间脉冲响应(RIR)用于度量声音在环境中的传播,对于给定环境合成高保真音频至关重要。已有一些工作提出将 RIR 表示为声发射器与接收器位置的神经场函数。然而,这些方法未能充分考虑音频场景的声学特性,导致性能不尽如人意。本文提出一种新颖的神经声学上下文场方法,称为 NACF,通过利用几何、材料属性和空间信息等多种声学上下文来对音频场景进行参数化。受 RIR 的独特性质(即时间非平滑性与单调能量衰减)驱动,我们设计了时间关联模块与多尺度能量衰减准则。实验结果表明,NACF 以显著优势超越现有的基于场的方法。更多定性结果请访问我们的项目页面。
引用
@article{arxiv.2309.15977,
title = {Neural Acoustic Context Field: Rendering Realistic Room Impulse Response With Neural Fields},
author = {Susan Liang and Chao Huang and Yapeng Tian and Anurag Kumar and Chenliang Xu},
journal= {arXiv preprint arXiv:2309.15977},
year = {2023}
}