ConvLab-2：一个用于构建、评估和诊断对话系统的开源工具包
计算与语言
2020-04-30 v2 人工智能
摘要
我们提出ConvLab-2，一个开源工具包，使研究人员能够使用最先进的模型构建任务型对话系统、执行端到端评估并诊断系统的弱点。作为ConvLab（Lee et al., 2019b）的继承者，ConvLab-2继承了ConvLab的框架，但集成了更强大的对话模型并支持更多数据集。此外，我们开发了一个分析工具和一个交互工具，以协助研究人员诊断对话系统。分析工具呈现丰富的统计数据并总结模拟对话中的常见错误，便于错误分析和系统改进。交互工具提供一个用户界面，允许开发者通过与系统交互并修改每个系统组件的输出，来诊断一个组装好的对话系统。
引用
@article{arxiv.2002.04793,
title = {ConvLab-2: An Open-Source Toolkit for Building, Evaluating, and Diagnosing Dialogue Systems},
author = {Qi Zhu and Zheng Zhang and Yan Fang and Xiang Li and Ryuichi Takanobu and Jinchao Li and Baolin Peng and Jianfeng Gao and Xiaoyan Zhu and Minlie Huang},
journal= {arXiv preprint arXiv:2002.04793},
year = {2020}
}
备注
Accepted by ACL 2020 demo track