第二届对话智能挑战赛（ConvAI2）
人工智能
2019-02-04 v1 计算与语言
人机交互
摘要
我们描述了 ConvAI2 NeurIPS 竞赛的设置与结果，该竞赛旨在推进开放域聊天机器人的技术水平。竞赛的一些关键要点为：（i）预训练的 Transformer 变体是当前该任务上性能最佳的模型；（ii）但为提升在多轮人机对话上的表现，未来系统必须超越困惑度等单词级指标，以在话语序列（对话）层面衡量性能——就重复、一致性和对话行为平衡而言（例如提问与回答的数量对比）。
引用
@article{arxiv.1902.00098,
title = {The Second Conversational Intelligence Challenge (ConvAI2)},
author = {Emily Dinan and Varvara Logacheva and Valentin Malykh and Alexander Miller and Kurt Shuster and Jack Urbanek and Douwe Kiela and Arthur Szlam and Iulian Serban and Ryan Lowe and Shrimai Prabhumoye and Alan W Black and Alexander Rudnicky and Jason Williams and Joelle Pineau and Mikhail Burtsev and Jason Weston},
journal= {arXiv preprint arXiv:1902.00098},
year = {2019}
}