中文

EmpTransfo:用于构建共情对话系统的多头 Transformer 架构

计算与语言 2020-03-09 v1 机器学习

摘要

理解情绪并作出相应回应是对话系统最大的挑战之一。本文提出 EmpTransfo,一种用于创建共情对话系统的多头 Transformer 架构。EmpTransfo 利用最先进的预训练模型(如 OpenAI-GPT)进行语言生成,尽管也可使用不同规模的模型。我们表明,利用情绪历史及其他元数据能够提升对话系统所生成对话的质量。我们使用一个具有挑战性的语言语料库进行的实验结果表明,所提方法在 Hit@1 和 PPL(困惑度)方面优于其他模型。

关键词

引用

@article{arxiv.2003.02958,
  title  = {EmpTransfo: A Multi-head Transformer Architecture for Creating Empathetic Dialog Systems},
  author = {Rohola Zandie and Mohammad H. Mahoor},
  journal= {arXiv preprint arXiv:2003.02958},
  year   = {2020}
}