PoLyScriber：用于复调音乐的提取器与歌词转写器集成微调
音频与语音处理
2023-05-08 v4 声音
信号处理
摘要
复调音乐的歌词转写具有挑战性，因为背景音乐会影响歌词可懂度。通常，歌词转写可通过两步流水线完成，即先由歌声提取前端，再由歌词转写后端完成，其中前端与后端分开训练。这种两步流水线受限于不完美的歌声提取以及前端与后端之间的不匹配。本工作中，我们提出一种新颖的端到端集成微调框架，称之为 PoLyScriber，以全局优化歌声提取前端与歌词转写后端，用于复调音乐中的歌词转写。实验结果表明，我们提出的 PoLyScriber 在公开可用测试数据集上相比现有方法取得了显著改进。
引用
@article{arxiv.2207.07336,
title = {PoLyScriber: Integrated Fine-tuning of Extractor and Lyrics Transcriber for Polyphonic Music},
author = {Xiaoxue Gao and Chitralekha Gupta and Haizhou Li},
journal= {arXiv preprint arXiv:2207.07336},
year = {2023}
}
备注
TALSP