通过结合音乐与歌词跟踪改进歌剧中的实时乐谱跟随

全自动歌剧跟踪具有挑战性，因为该体裁的声学复杂性以复杂方式结合了音乐与语言信息（演唱、念白）。本文提出一种用于完整歌剧跟踪的新流程。该流程基于两个跟踪器。一个已被证明能有效跟踪管弦乐部分的音乐跟踪器将主导跟踪过程。此外，一个近期被证实能可靠跟踪歌剧歌曲歌词的歌词跟踪器，将在跟踪文本主导胜于音乐的部分时纠正音乐跟踪器。我们将在歌剧《唐·乔万尼》上演示该方法的有效性，表明此技术有助于提升完整歌剧跟踪器的准确性与鲁棒性。