PlugSonic:一个基于网页与移动的双耳音频与声音叙事平台
声音
2020-08-12 v1 人机交互
多媒体
音频与语音处理
摘要
PlugSonic 是一套基于网页与移动的应用套件,用于双耳交互声景与声音叙事的策展和体验。它作为 PLUGGY 欧盟项目(Pluggable Social Platform for Heritage Awareness and Participation)的一部分开发,由两个主要应用组成:PlugSonic Sample,用于编辑和应用音频效果;以及 PlugSonic Soundscape,用于创建和体验双耳声景。PlugSonic 中的音频处理基于 Web Audio API 和 3D Tune-In Toolkit,而在物理空间中对声景的探索则通过 Apple 的 ARKit 实现。本文中我们介绍了设计选择、用户参与过程以及实现细节。PlugSonic 的主要目标是技术民主化;PlugSonic 的用户——无论是机构还是市民——都被赋予创建、处理和体验 3D 声景与声音叙事所需的工具;无需特定设备、外部工具(软件和/或硬件)、专业知识或定制开发。以无经验用户就三项任务——创建、策展和体验——进行的评估表明,PlugSonic 确实是一个简单、有效且强大的工具。
引用
@article{arxiv.2008.04638,
title = {PlugSonic: a web- and mobile-based platform for binaural audio and sonic narratives},
author = {Marco Comunità and Andrea Gerino and Veranika Lim and Lorenzo Picinali},
journal= {arXiv preprint arXiv:2008.04638},
year = {2020}
}
备注
22 pages, 11 figures