PARADISE: 评估口语对话代理的框架
cmp-lg
2008-02-03 v1 计算与语言
摘要
本文提出了 PARADISE(PARAdigm for DIalogue System Evaluation),一个用于评估口语对话代理的通用框架。该框架将任务需求与代理的对话行为解耦,支持对话策略之间的比较,支持子对话和完整对话的性能计算,指定了各种因素对性能的相对贡献,并通过归一化任务复杂度使得执行不同任务的代理之间可以进行比较。
引用
@article{arxiv.cmp-lg/9704004,
title = {PARADISE: A Framework for Evaluating Spoken Dialogue Agents},
author = {Marilyn A. Walker and Diane J. Litman and Candace A. Kamm and Alicia Abella},
journal= {arXiv preprint arXiv:cmp-lg/9704004},
year = {2008}
}
备注
10 pages, uses aclap, psfig, lingmacros, times