AudioMiXR:面向增强现实声音设计的六自由度空间音频对象操控
人机交互
2025-08-07 v4 声音
音频与语音处理
摘要
我们提出了AudioMiXR,这是一个增强现实(AR)界面,旨在评估用户如何使用部署在头戴式显示器(Apple Vision Pro)上的六自由度(6DoF)来操控位于其物理空间中的虚拟音频对象,以进行3D声音设计。现有的3D声音设计工具通常局限于桌面显示器,这可能限制了在运行环境中进行混音的空间感知。利用XR HMD创建声景可能为3D声音设计提供一个实时测试环境,因为现代HMD能够借助跨模态交互提供精确的空间定位。然而,目前尚无针对XR中6DoF声音设计的具体设计指南。为了向确定该领域的设计相关研究方向迈出第一步,我们进行了一项探索性研究,招募了27名参与者,包括专家和非专家声音设计师。目标是评估可用于指导未来3D声音设计研究场所的设计经验。我们进行了一项受试者内研究,用户分别设计了音乐和电影声景。在对参与者数据进行主题分析后,我们总结出两条设计经验:(1)用于AR声音设计的本体感觉,以及(2)平衡AR图形用户界面中的视听模态。此外,基于我们的结果,我们提供了最能从6DoF声音设计中受益的应用领域。为了扩展这些见解,我们进行了第二项受试者内研究,将AudioMiXR与2D声像控制器基线进行了比较。结果显示,AudioMiXR显著提高了可用性(SUS),降低了挫败感和心理工作负荷(NASA-TLX),并在所有子量表上增强了创造力。这些发现表明,6DoF AR交互在用户体验和创造性输出方面产生了可衡量的增益,将AudioMiXR定位为未来基于AR的声音设计工具的有前景的基础。
引用
@article{arxiv.2502.02929,
title = {AudioMiXR: Spatial Audio Object Manipulation with 6DoF for Sound Design in Augmented Reality},
author = {Brandon Woodard and Margarita Geleta and Joseph J. LaViola and Andrea Fanelli and Rhonda Wilson},
journal= {arXiv preprint arXiv:2502.02929},
year = {2025}
}
备注
Updated abstract