SoundSignature:你喜欢什么类型的音乐?
声音
2024-10-07 v1 人工智能
信息检索
音频与语音处理
摘要
SoundSignature 是一个音乐应用,集成了定制的 OpenAI Assistant 来分析用户喜欢的歌曲。该系统融合了先进的音乐信息检索(Music Information Retrieval, MIR)Python 软件包,将提取的声学/音乐特征与助手广泛了解的艺术家和乐队信息相结合。借助这种组合知识,SoundSignature 利用语义音频和来自新兴“声音互联网”(Internet of Sounds, IoS)生态系统的原则,将 MIR 与 AI 结合,为用户提供关于其音乐的声学属性的个人化见解,类似于音乐偏好人格报告。用户随后可与聊天机器人交互,以深入探讨所执行的声学分析及其如何与其音乐偏好相关。这种交互性将该应用转化为不仅是关于熟悉或喜爱歌曲的资源,还是教育平台,使用户能够深化对音乐特征、音乐理论、信号处理中常用的声学属性以及背后艺术家的理解。除一般可用性外,该应用还集成了几个已建立的开源乐器专用工具,包括和弦识别算法(CREMA)、源分离算法(DEMUCS)以及音频转 MIDI 转换器(basic-pitch)。这些功能使不会编程的用户能够通过与聊天机器人交互(例如,请给我这首歌的分轨?)轻松访问先进的开源音乐处理算法。本文突出该应用的创新特征和教育潜力,并呈现了来自小规模用户研究的发现,以评估其有效性和可用性。
引用
@article{arxiv.2410.03375,
title = {SoundSignature: What Type of Music Do You Like?},
author = {Brandon James Carone and Pablo Ripollés},
journal= {arXiv preprint arXiv:2410.03375},
year = {2024}
}
备注
10 pages, 1 figure, to be published in the 2024 International Symposium on the IEEE Internet of Sounds Proceedings