2022 年 NIST 语言识别评测
计算与语言
2023-03-01 v1 机器学习
声音
音频与语音处理
摘要
2022 年，美国国家标准与技术研究院（NIST）开展了最新的语言识别评测（LRE）。该系列评测自 1996 年起由 NIST 主办，旨在促进语言识别研究并衡量最先进技术。与以往的 LRE 类似，LRE22 聚焦于会话电话语音（CTS）与广播窄带语音（BNBS）数据。LRE22 还引入了新评测特性，例如强调非洲语言（包括低资源语言），以及由从较长录音中随机采样并提取的 3 秒至 35 秒语音片段组成的测试集。共有 21 家研究机构组成 16 支队伍参与了这项为期 3 个月的评测，并提交了共计 65 份有效系统供评测。本文给出 LRE22 的概述以及系统在不同评测条件下性能的分析。评测结果表明，Oromo 和 Tigrinya 较易检测，而 Xhosa 和 Zulu 更具挑战性。某些语言对之间表现出更高的混淆度。当语音时长增加时，系统性能显著提升至某一时长，此后观察到性能回报递减。
引用
@article{arxiv.2302.14624,
title = {The 2022 NIST Language Recognition Evaluation},
author = {Yooyoung Lee and Craig Greenberg and Eliot Godard and Asad A. Butt and Elliot Singer and Trang Nguyen and Lisa Mason and Douglas Reynolds},
journal= {arXiv preprint arXiv:2302.14624},
year = {2023}
}
备注
5 pages, 10 figures