社交对话系统评估技术综述
计算与语言
2017-09-14 v1
摘要
与目标导向对话不同，社交对话没有明确的任务成功度量。因此，对这些系统的评估是出了名的困难。在本文中，我们回顾了当前的评估方法，重点关注自动指标。我们得出结论：基于轮次的指标常常忽略上下文，并且没有考虑到多个回复均有效这一事实，而对话结束奖励主要是手工设计的。两者都缺乏基于人类感知的基础。
引用
@article{arxiv.1709.04409,
title = {A Review of Evaluation Techniques for Social Dialogue Systems},
author = {Amanda Cercas Curry and Helen Hastie and Verena Rieser},
journal= {arXiv preprint arXiv:1709.04409},
year = {2017}
}
备注
2 pages