视觉对话模型能否进行记分保持？探究对话表征如何增量式编码共享知识
计算与语言
2025-02-26 v2
摘要
具有认知合理性的视觉对话模型应在对话上下文中保持一个记录已确立共享事实的心理记分板。我们提出一种基于理论的评估方法，用于考察在VisDial数据集上预训练的模型在多大程度上增量式地构建出恰当进行记分保持的表征。我们的结论是，所分析的模型在一定程度上具备区分对话中共享陈述与私有已知陈述的能力，但这种能力并非总是增量式一致的，这部分可能是由于原始任务中对 grounding 交互的需求有限。
引用
@article{arxiv.2204.06970,
title = {Can Visual Dialogue Models Do Scorekeeping? Exploring How Dialogue Representations Incrementally Encode Shared Knowledge},
author = {Brielen Madureira and David Schlangen},
journal= {arXiv preprint arXiv:2204.06970},
year = {2025}
}
备注
Accepted at ACL 2022, short paper (v2 fixes labels in Figure 3)