SingNet：一种实时歌声节拍与下拍追踪系统
音频与语音处理
2023-06-06 v1
摘要
歌声节拍与下拍追踪在自动音乐制作、分析与处理中具有多种应用。其中一些应用需要实时处理，例如现场表演处理以及针对歌唱输入的自动伴奏。该任务具有挑战性，原因在于歌声信号中存在非平凡的节奏与谐波模式。对于实时处理，其进一步引入了诸如无法获取未来数据、且无法修正与后续结果不一致的前序结果等约束。本文介绍了首个实时追踪歌声节拍与下拍的系统。具体而言，我们提出了一种新颖的动态粒子滤波方法，其利用可变数量的粒子，结合离线历史数据来修正在线推断。我们在两个数据集上评估了性能：带有分离人声轨的 GTZAN，以及一个包含原始人声干声的内部数据集。实验结果表明，我们所提出的方法比基线高出 3-5%。
引用
@article{arxiv.2306.02372,
title = {SingNet: A Real-time Singing Voice Beat and Downbeat Tracking System},
author = {Mojtaba Heydari and Ju-Chiang Wang and Zhiyao Duan},
journal= {arXiv preprint arXiv:2306.02372},
year = {2023}
}
备注
Accepted for 2023 International Conference on Acoustics, Speech, and Signal Processing (ICASSP-2023)