使用ChucK和Unity实现健康与能源领域的交互式声音化

声音化可以提供关于数据的有价值见解，但大多数现有方法并非设计为由用户以交互方式控制。交互使声音化设计者能够更快速地试验声音设计，并允许通过交互各种控制参数实时修改声音化。在本文中，我们描述了两种交互式声音化的案例研究，它们利用了最近在国际听觉显示会议上描述的公开数据集。这些数据集来自健康和能源领域：脑电图α波数据以及由二氧化氮、二氧化硫、一氧化碳和臭氧组成的空气污染物数据。我们展示了如何利用基于ChucK、Unity和Chunity构建的通用交互式声音化框架来重建这些声音化以支持交互。除了支持现有声音化工具包中常见的典型声音化方法外，我们的框架还引入了新颖的方法，例如支持离散事件、交错播放多个数据流以进行比较，以及使用频率调制合成，其中一个数据属性调制另一个。我们还描述了如何使用这些新功能来改善我们所研究的两个数据集的声音化体验。