面向语言学习应用的非母语儿童语音自动识别
计算与语言
2024-07-24 v1 声音
音频与语音处理
信号处理
摘要
语音机器人（voicebots）为支持语言技能发展提供了新途径，尤其在二语学习背景下。然而，语音机器人大多面向母语成人说话者。我们旨在评估两个最先进的 ASR 系统，即 Wav2Vec2.0 和 Whisper AI 的性能，以开发能够支持儿童习得外语的语音机器人。我们在母语与非母语荷兰儿童的朗读和即兴语音上评估了它们的性能。我们还研究了利用 ASR 技术洞察儿童发音与流畅度的效用。结果表明，近期基于预训练 Transformer 的 ASR 模型取得了可接受的性能，并从中可提取关于音素发音质量的详细反馈，尽管儿童和 non-native 语音具有挑战性。
引用
@article{arxiv.2306.16710,
title = {Automatic Speech Recognition of Non-Native Child Speech for Language Learning Applications},
author = {Simone Wills and Yu Bai and Cristian Tejedor-Garcia and Catia Cucchiarini and Helmer Strik},
journal= {arXiv preprint arXiv:2306.16710},
year = {2024}
}
备注
Published on SLATE 2023, Esmad, Politecnico Do Porto, Portugal, 26-28 June, 2023, pp: 11:1-11:8