通过音频感知测量母婴情绪
音频与语音处理
2019-12-13 v1 机器学习
声音
机器学习
摘要
发展心理学文献指出，母亲与其婴儿之间的情感交流同婴儿的社会情感与认知发展相关。在本研究中，我们获取了10对母婴全天音频记录，以研究其言语中的情感交流，重点关注母亲言语。为构建语音情感检测模型，我们使用Ryerson视听情感语音与歌曲数据库 (RAVDESS) 训练了一个卷积神经网络模型，能够以70%的准确率分类6种不同情绪。我们将该模型应用于母亲言语，发现主导情绪为愤怒与悲伤，但这与事实不符。基于我们自身的观察，我们得出结论：由演员协助制作的情感语音数据库难以很好地泛化至真实生活场景，这提示未来应采用主动学习或无监督方法。
引用
@article{arxiv.1912.05920,
title = {Measuring Mother-Infant Emotions By Audio Sensing},
author = {Xuewen Yao and Dong He and Tiancheng Jing and Kaya de Barbaro},
journal= {arXiv preprint arXiv:1912.05920},
year = {2019}
}