中文

PlugSonic:一个基于网页与移动的双耳音频与声音叙事平台

声音 2020-08-12 v1 人机交互 多媒体 音频与语音处理

摘要

PlugSonic 是一套基于网页与移动的应用套件,用于双耳交互声景与声音叙事的策展和体验。它作为 PLUGGY 欧盟项目(Pluggable Social Platform for Heritage Awareness and Participation)的一部分开发,由两个主要应用组成:PlugSonic Sample,用于编辑和应用音频效果;以及 PlugSonic Soundscape,用于创建和体验双耳声景。PlugSonic 中的音频处理基于 Web Audio API 和 3D Tune-In Toolkit,而在物理空间中对声景的探索则通过 Apple 的 ARKit 实现。本文中我们介绍了设计选择、用户参与过程以及实现细节。PlugSonic 的主要目标是技术民主化;PlugSonic 的用户——无论是机构还是市民——都被赋予创建、处理和体验 3D 声景与声音叙事所需的工具;无需特定设备、外部工具(软件和/或硬件)、专业知识或定制开发。以无经验用户就三项任务——创建、策展和体验——进行的评估表明,PlugSonic 确实是一个简单、有效且强大的工具。

关键词

引用

@article{arxiv.2008.04638,
  title  = {PlugSonic: a web- and mobile-based platform for binaural audio and sonic narratives},
  author = {Marco Comunità and Andrea Gerino and Veranika Lim and Lorenzo Picinali},
  journal= {arXiv preprint arXiv:2008.04638},
  year   = {2020}
}

备注

22 pages, 11 figures