通过话语重写改进对话机器人回复矛盾检测
计算与语言
2022-07-26 v1 人工智能
摘要
尽管基于大型神经模型的聊天机器人常能在开放域对话中生成流畅回复,但一种显著的错误类型是与前文对话轮次相矛盾或不一致。先前工作将机器人回复中的矛盾检测视为类似自然语言推理的任务,例如检测一对机器人话语之间的矛盾。然而,对话中的话语可能包含共指或省略,直接使用这些话语未必足以识别矛盾。本工作旨在通过重写所有机器人话语以还原前指与省略,从而改进矛盾检测。我们整理了一个新的话语重写数据集并基于此构建了重写模型。我们通过实证表明,该模型能生成令人满意的重写结果,使机器人话语更完整。此外,使用重写后的话语显著提升了矛盾检测性能,例如AUPR与联合准确率分数(同时检测矛盾及其证据)分别绝对提升了6.5%与4.5%。
引用
@article{arxiv.2207.11862,
title = {Improving Bot Response Contradiction Detection via Utterance Rewriting},
author = {Di Jin and Sijia Liu and Yang Liu and Dilek Hakkani-Tur},
journal= {arXiv preprint arXiv:2207.11862},
year = {2022}
}
备注
Accepted by SIGDial 2022