从时间到空间：设计沉浸式环境中基于分段音频的空间化交互以实现对表演艺术非物质文化遗产的主动参与
人机交互
2025-05-26 v1
摘要
京剧等表演艺术形式因理解其细微差别需要大量被动聆听而面临传播挑战。为创造引人入胜的听觉非物质文化遗产（ICH）体验，我们设计了一个基于空间交互的分段音频（SISA）虚拟现实系统，将被动的 ICH 体验转化为主动体验。我们开展了：（1）与七位利益相关者进行协同设计工作坊以确定设计需求，（2）与五位参与者进行原型验证以检验设计元素，（3）与十六位参与者进行用户测试以探索京剧。我们通过将声音切割为短音频段并应用 t-SNE 算法在空间上对音频段进行聚类，设计了将时间音乐转化为空间交互的方案。用户根据音频属性的相似性在这些声音中导航。分析揭示了两种不同的交互模式（渐进式和自适应式），并证明了 SISA 在促进主动听觉 ICH 参与方面的有效性。我们的工作阐明了利用空间化聆听方式丰富传统表演艺术形式的设计过程。
引用
@article{arxiv.2505.18112,
title = {From Temporal to Spatial: Designing Spatialized Interactions with Segmented-audios in Immersive Environments for Active Engagement with Performing Arts Intangible Cultural Heritage},
author = {Yuqi Wang and Sirui Wang and Shiman Zhang and Kexue Fu and Michelle Lui and Ray Lc},
journal= {arXiv preprint arXiv:2505.18112},
year = {2025}
}