PerspectiveLiberator——面向单视角 Ambisonic 房间脉冲响应的上混 6DoF 渲染插件
声音
2022-10-11 v2 音频与语音处理
摘要
如今，虚拟现实接口允许用户以六自由度（6DoF）虚拟地改变视角，并且为与视觉部分一致，声学视角也需要交互式更新。基于动态头部旋转的单视角渲染已能通过上混一阶 Ambisonic 房间脉冲响应（ASDM、SIRR 等）较为可靠地工作。本文介绍了一款通过实时视角外推将虚拟视角从实测视角中解放出来的插件：PerspectiveLiberator。该插件允许在两种用于方向分辨率增强的算法（ASDM、4DE）间进行选择。在其基于卷积的 6DoF 渲染主要任务中，插件检测并定位早期 Ambisonic 房间脉冲响应中显著的方向性声学事件，并以适配虚拟听者可变视角的方向、到达时间和电平对其重新编码。扩散残差的方向分辨率得到增强，但不受平移运动影响，以尽可能保留原始房间印象。
引用
@article{arxiv.2210.03360,
title = {The PerspectiveLiberator -- an upmixing 6DoF rendering plugin for single-perspective Ambisonic room impulse responses},
author = {Kaspar Müller and Franz Zotter},
journal= {arXiv preprint arXiv:2210.03360},
year = {2022}
}
备注
4 pages, submitted to conference: DAGA 2021, Vienna, Austria, 2021