基于音素识别排序的语句验证检测台词与配音的不匹配
音频与语音处理
2020-03-23 v1 计算与语言
摘要
本研究旨在检测文本台词与配音之间的不匹配。为此,我们提出了一种新颖的语句验证(UV)方法,该方法计算配音与台词的音素序列之间的对应程度。我们发现,夸张配音的音素识别概率相较于普通语音有所降低,但其排序并未表现出显著变化。因此,所提方法利用与音素序列对应的各音素段的识别排序,来衡量配音语句相对于其对应台词的置信度。实验结果表明,所提 UV 方法优于用于检测语音与转写之间不匹配的基于跨模态注意力的最先进方法。
引用
@article{arxiv.2003.09180,
title = {Detecting Mismatch between Text Script and Voice-over Using Utterance Verification Based on Phoneme Recognition Ranking},
author = {Yoonjae Jeong and Hoon-Young Cho},
journal= {arXiv preprint arXiv:2003.09180},
year = {2020}
}
备注
Accepted by ICASSP 2020