中文

一种哼唱旋律与歌曲序列匹配的方法

声音 2024-10-29 v1 人工智能 信息检索 音频与语音处理

摘要

脑海中挥之不去的旋律,也被称为“耳虫”,很难摆脱,除非你再次聆听它或大声唱出来。但如果你找不到那首歌的名字怎么办?这一定是一种难以忍受的感觉。对于人类来说,根据哼唱声音识别歌曲名称并非易事,这应该由机器来完成。然而,目前没有关于哼唱旋律识别的研究论文发表。本文改编自 Hum2Song Zalo AI Challenge 2021——一项通过用户哼唱旋律查询歌曲名称的比赛,类似于 Google 的 Hum to Search。本文涵盖了从原始格式到可用于训练和推理的可用形式的预处理数据细节。在为特征提取阶段训练嵌入模型时,我们使用一些最先进的技术进行了实验,例如 ResNet、VGG、AlexNet、MobileNetV2。在推理阶段,我们使用 Faiss 模块有效地搜索与哼唱声音序列匹配的歌曲。在公开测试集上的 MRR@10 指标结果接近 94%\%,并在公开排行榜上名列第一。

关键词

引用

@article{arxiv.2410.20352,
  title  = {An approach to hummed-tune and song sequences matching},
  author = {Loc Bao Pham and Huong Hoang Luong and Phu Thien Tran and Phuc Hoang Ngo and Vi Hoang Nguyen and Thinh Nguyen},
  journal= {arXiv preprint arXiv:2410.20352},
  year   = {2024}
}