我比你更早知道你的感受：人机对话中未来情感反应的预测
人机交互
2024-12-19 v4 机器人学
声音
音频与语音处理
摘要
当前的口语对话系统（SDSs）常作为被动倾听者，仅在接收到用户语音后才作出回应。为实现类人对话，我们提出了一种新颖的未来预测架构，使 SDS 能在用户说话前依据其当前行为预判未来的情感反应。本文研究了语音与笑声两种场景。在语音中，我们基于用户未来情绪与系统当前情绪的时间关系及其与系统当前对话行为（DA）的因果关系来预测用户未来情绪。在笑声中，我们利用系统当前轮的笑声行为预测用户笑声的发生与类型。对人机对话的初步分析显示了人与机器人所展现情绪与笑声的同步性，以及对话中 DA-情绪的因果性。这验证了我们的架构可有助于开发预见式 SDS。
引用
@article{arxiv.2303.00146,
title = {I Know Your Feelings Before You Do: Predicting Future Affective Reactions in Human-Computer Dialogue},
author = {Yuanchao Li and Koji Inoue and Leimin Tian and Changzeng Fu and Carlos Ishi and Hiroshi Ishiguro and Tatsuya Kawahara and Catherine Lai},
journal= {arXiv preprint arXiv:2303.00146},
year = {2024}
}
备注
Accepted to CHI2023 Late-Breaking Work