中文

从实验室到日常生活的夫妻多模态情绪识别:基于智能手表的研究

人机交互 2022-12-29 v1 计算与语言 机器学习 声音 信号处理

摘要

夫妻通常共同管理慢性疾病,而这一管理过程给患者及其伴侣双方都带来情绪负担。因此,识别双方伴侣在日常生活中的情绪,有助于洞察其在慢性疾病管理中的情绪健康状况。目前,伴侣情绪是在实验室和日常生活中通过自我报告(不利于连续情绪评估)或观察者报告(人工、耗时且昂贵)来推断的。目前尚无关于夫妻情绪识别研究的全面综述。此外,现有夫妻情绪识别方法(1)聚焦于美国的英语母语夫妻,(2)使用实验室采集的数据,(3)基于观察者评分而非伴侣自我报告/主观情绪进行识别。在本论文所涵盖的工作(8 篇论文——5 篇已发表,3 篇正在不同期刊审稿中)中,我们填补了夫妻情绪识别领域的文献空白,利用来自共计 1051 人的 161 小时数据开发了情绪识别系统,并为将夫妻情绪识别从现状的实验室环境推向日常生活作出了贡献。本论文有助于构建自动化情绪识别系统,最终使伴侣能够在日常生活中监测自身情绪,并支持干预措施的投放以改善其情绪健康。

关键词

引用

@article{arxiv.2212.13917,
  title  = {Multimodal Emotion Recognition among Couples from Lab Settings to Daily Life using Smartwatches},
  author = {George Boateng},
  journal= {arXiv preprint arXiv:2212.13917},
  year   = {2022}
}

备注

PhD Thesis, 2022 - ETH Zurich