面向多语言按例查询搜索的声学跨词跨度嵌入
计算与语言
2020-11-25 v1
摘要
按例查询（QbE）语音搜索是将口语查询与搜索集合中的话语进行匹配的任务。在低资源或零资源环境下，QbE 搜索通常通过基于动态时间规整（DTW）的方法来解决。近期工作发现，基于声学词嵌入（AWEs）的方法可同时提升性能和搜索速度。然而，先前基于 AWE 的 QbE 工作主要关注英语数据和单词级查询。在本工作中，我们将 AWE 训练推广到词跨度，产生声学跨度嵌入（ASE），并探索 ASE 在多种未见语言中以任意长度查询进行 QbE 的应用。我们考虑常用的设定，即我们可以访问与未见测试语言不同的其他语言（在我们的案例中为几种低资源语言）的标注数据。我们在 QUESST 2015 QbE 任务上评估我们的方法，发现基于多语言 ASE 的搜索比基于 DTW 的搜索快得多，并且优于该任务上先前发表的最佳结果。
引用
@article{arxiv.2011.11807,
title = {Acoustic span embeddings for multilingual query-by-example search},
author = {Yushi Hu and Shane Settle and Karen Livescu},
journal= {arXiv preprint arXiv:2011.11807},
year = {2020}
}