基于霍克斯过程的对话中用户满意度动态建模
计算与语言
2023-05-23 v1
摘要
对话系统受到越来越多的关注,而自动评估其性能仍然具有挑战性。用户满意度估计(USE)已被提出作为一种替代方案。它假设对话系统的性能可以通过用户满意度来衡量,并使用估计器来模拟用户。USE的有效性在很大程度上取决于估计器。现有估计器在每个回合独立预测用户满意度,忽略了对话内跨回合的满意度动态。为了充分模拟用户,考虑满意度动态至关重要。为填补这一空白,我们提出了一种新的估计器ASAP(基于霍克斯过程的满意度估计,sAtisfaction eStimation via HAwkes Process),将跨回合的用户满意度视为事件序列,并采用霍克斯过程有效建模该序列中的动态。在四个基准对话数据集上的实验结果表明,ASAP能够大幅优于最先进的基线估计器。
引用
@article{arxiv.2305.12594,
title = {Modeling User Satisfaction Dynamics in Dialogue via Hawkes Process},
author = {Fanghua Ye and Zhiyuan Hu and Emine Yilmaz},
journal= {arXiv preprint arXiv:2305.12594},
year = {2023}
}
备注
To appear at ACL 2023