探索 bat song syllable 在自监督音频编码器中的表示
声音
2024-09-20 v1 人工智能
机器学习
音频与语音处理
摘要
深度学习模型在人类生成声音上训练后，能否良好区分另一种物种的声学类型？我们分析了 bat song syllable 在多种自监督音频编码器中的编码方式，发现在人类语音上预训练的模型生成的不同 syllable 类型表征最为显著。这些发现为在 bat 生物声学中应用跨物种迁移学习以及更好地理解音频编码器模型中跨分布信号处理提供了第一步。
引用
@article{arxiv.2409.12634,
title = {Exploring bat song syllable representations in self-supervised audio encoders},
author = {Marianne de Heer Kloots and Mirjam Knörnschild},
journal= {arXiv preprint arXiv:2409.12634},
year = {2024}
}
备注
Presented at VIHAR-2024; see https://vihar-2024.vihar.org/