音乐中歌词与音频的联合情感分析

情感或情绪在音乐中可以在多个层面表达。在自动分析中，通常分析实际的音频数据，但歌词在情绪感知中也起着至关重要的作用。我们首先分别评估了基于歌词和音频的各种情感分析模型。相应的方法已经显示出令人满意的结果，但它们也表现出弱点，我们更详细地研究了其原因。此外，我们提出并评估了结合音频和歌词结果的不同方法。同时考虑两种模态通常会带来性能提升。我们更深入地研究了误分类以及音频与歌词情感之间的（有时是有意的）矛盾，并确定了可能的原因。最后，我们探讨了该研究领域的一些根本问题，例如高度主观性、数据缺乏以及情感分类体系的不一致性。