提升用户语音交互：通过角色互换方法探索情感感知语音助手
人机交互
2025-02-24 v1 声音
音频与语音处理
摘要
随着语音助手(VA)越来越多地融入日常生活，致力于识别和适当应对用户情感的情感感知系统的需求日益增长。虽然在语音情感识别(SER)和情感分析方面取得了显著进展，但有效应对用户情感——尤其是负面情感——仍然是一个挑战。本研究通过角色互换方法探索人类在VA交互中情感响应策略，参与者调节AI的情感而非接收预编程响应。通过语音特征分析和自然语言处理(NLP)，我们检查了各种情感情景下的声学和语言模式。结果显示，参与者在与负面情感线索互动时偏好中性或积极情感响应，凸显了向情感调节和降级冲突的自然倾向。关键声学指标如均方根(RMS)、零交叉率(ZCR)和抖动被识别为敏感于情感状态的指标，而情感极性和词汇多样性(TTR)则区分了积极和消极响应。这些发现为开发能够提供具有同理心、文化敏感且符合用户期望的自适应、情境感知VA提供了宝贵见解。通过理解人类在AI交互中自然调节情感的方式，本研究为设计更直观和情感智能语音助手贡献了，从而增强了用户在人机交互中的信任和参与度。
引用
@article{arxiv.2502.15367,
title = {Advancing User-Voice Interaction: Exploring Emotion-Aware Voice Assistants Through a Role-Swapping Approach},
author = {Yong Ma and Yuchong Zhang and Di Fu and Stephanie Zubicueta Portales and Danica Kragic and Morten Fjeld},
journal= {arXiv preprint arXiv:2502.15367},
year = {2025}
}
备注
19 pages, 6 figures