中文

SpliceOut:一种简单高效的音频增强方法

声音 2021-10-14 v2 人工智能 机器学习 音频与语音处理

摘要

时间掩码(time masking)已成为语音与音频任务(包括自动语音识别(ASR)和音频分类)中事实上的增强技术,最显著的是作为 SpecAugment 的一部分。在本工作中,我们提出 SpliceOut,一种对时间掩码的简单改进,使其在计算上更高效。SpliceOut 在多种语音与音频任务上表现与 SpecAugment 相当(有时更优),包括使用不同训练数据量的七种语言的 ASR,以及语音翻译、声音与音乐分类,从而确立其作为一种广泛适用的音频增强方法。SpliceOut 在与其他增强技术结合使用时还能带来额外的增益。除全监督设定外,我们还展示了 SpliceOut 能够补充无监督表示学习,在半监督和自监督设定下均带来性能提升。

关键词

引用

@article{arxiv.2110.00046,
  title  = {SpliceOut: A Simple and Efficient Audio Augmentation Method},
  author = {Arjit Jain and Pranay Reddy Samala and Deepak Mittal and Preethi Jyoti and Maneesh Singh},
  journal= {arXiv preprint arXiv:2110.00046},
  year   = {2021}
}