非言语线索在鲁棒发音评估中的互补作用
计算与语言
2023-09-15 v1 声音
音频与语音处理
摘要
发音评估系统的研究侧重于利用非母语 (L2) 语音的语音与音系层面特征，往往忽视了隐藏于非言语线索中的丰富信息层。在本研究中，我们提出了一种新颖的发音评估框架 IntraVerbalPA。该框架创新性地融合了细粒度帧级与抽象语句级非言语线索，以及传统的语音与音素表征。此外，我们引入“音素时长优度 (Goodness of phonemic-duration)”度量，以在框架内有效建模时长分布。我们的结果验证了所提 IntraVerbalPA 框架及其各组成模块的有效性，取得的性能与现有研究工作相当或更优。
引用
@article{arxiv.2309.07739,
title = {The complementary roles of non-verbal cues for Robust Pronunciation Assessment},
author = {Yassine El Kheir and Shammur Absar Chowdhury and Ahmed Ali},
journal= {arXiv preprint arXiv:2309.07739},
year = {2023}
}
备注
5 pages, submitted to ICASSP 2024