利用倒 vocal tract 变量与面部动作单元量化精神分裂症中的神经运动协调性
音频与语音处理
2021-02-16 v1
摘要
本研究利用时延嵌入相关分析，考察表现出强烈阳性症状（如幻觉与妄想）的精神分裂症受试者的言语发音协调性。我们表明，具有强烈阳性症状且病情明显的精神分裂症受试者在面部与言语姿态上呈现出比健康受试者更为复杂的协调模式。这一观察结果与既往在重性抑郁障碍（MDD）中的研究相反，后者中 MDD 受试者相对于健康对照或缓解期受试者表现出更简单的协调模式。鉴于 MDD 必然伴随精神运动迟缓（即阴性症状），影响言语、观念与运动，这种差异并不令人意外。就言语而言，精神运动迟缓导致言语变慢，且较同一说话者缓解期及健康受试者的言语出现更多、更长的停顿。时延嵌入相关分析已被用于量化言语发音协调模式的差异。当前研究基于从视频数据提取的 17 个面部动作单元（FAUs）与从同步记录的音频数据获得的 6 个声道变量（TVs）。TVs 使用基于发音音系学的语音反演系统提取，该系统将声学信号映射至声道变量。由 TVs 与 FAUs 计算的高层时延嵌入相关特征用于训练融合音频与视频模态的堆叠集成分类器。结果表明，在言语神经运动协调性方面，健康受试者与（具有强烈阳性症状的）精神分裂症受试者之间存在有前景的区分。
引用
@article{arxiv.2102.07054,
title = {Inverted Vocal Tract Variables and Facial Action Units to Quantify Neuromotor Coordination in Schizophrenia},
author = {Yashish Maduwantha H. P. E. R. S and Chris Kitchen and Deanna L. Kelly and Carol Espy-Wilson},
journal= {arXiv preprint arXiv:2102.07054},
year = {2021}
}
备注
Conference