探索基础模型如何通过音频效果改变情感
声音
2026-05-22 v4 人工智能
摘要
音频效果(FX)如混响、失真、调制和动态范围处理在塑造音乐聆听期间的情感反应中起着关键作用。虽然先前研究已经考察了低级音频特征与情感感知之间的联系,但音频 FX 对情感的系统性影响仍未被充分探索。本工作研究了如何利用基础模型——大规模在多模态数据上预训练的神经网络架构——来分析这些效应。这类模型编码了音乐结构、音色和情感含义之间的丰富关联,为探测声音设计技术的情感后果提供了强大框架。通过对深度学习模型中的嵌入应用各种探测方法,我们研究了音频 FX 与估计情感之间复杂的非线性关系,发现了与特定效果相关的模式,并评估了基础音频模型的鲁棒性。我们的发现旨在推进对音频制作实践感知影响的理解,对音乐认知、表演和情感计算具有启示意义。
引用
@article{arxiv.2509.15151,
title = {Exploring How Audio Effects Alter Emotion with Foundation Models},
author = {Stelios Katsis and Vassilis Lyberatos and Spyridon Kantarelis and Edmund Dervakos and Giorgos Stamou},
journal= {arXiv preprint arXiv:2509.15151},
year = {2026}
}
备注
https://github.com/stelioskt/audioFX