对话误入歧途，然后呢？评估对话预测模型

我们通常依靠直觉来预判对话的走向。赋予自动化系统类似的远见能力，可以使它们能够辅助人与人之间的交互。近期关于开发具有这种预测能力的模型的工作集中于“对话误入歧途”（CGA）任务：预测正在进行的对话是否会偏离正轨。在这项工作中，我们重新审视了这一任务，并引入了首个统一评估框架，创建了一个能够实现不同架构之间直接且可靠比较的基准。这使我们能够结合近期语言建模的进展，呈现 CGA 模型当前进展的最新概述。我们的框架还引入了一个新的指标，用于捕捉模型在对话进行过程中修正其预测的能力。