将视频噪声作为音频滤波并结合运动检测以构建乐器

尽管数字视频与音频处于不同物理域，它们却有许多共同特征。二者均为时间数据流，常以 8 位值存储于缓冲区中。本文研究一种以视频信号作为输入来生成谐波声音的方法。提出了一种乐器，其在声音合成方法以及用于以特定速度选择音符的控制器接口中均利用视频。作者非正式地判定，所得到的乐器声音悦耳且有趣，但难以控制，因此适用于合成器衬底音色。