中文

语言模型是否知道托罗有妻子?——关于先决条件问题的调查

计算与语言 2026-03-10 v1

摘要

我们调查了语言模型如何处理先决条件问题,这是语义学中一个尚未解决的难题,涉及条件句中先决条件的理论与人类解释之间的差异。我们将这一现象重新表述为自然语言推理任务,构建了一个诊断数据集以探测条件中的先决条件投射。我们评估了RoBERTa、DeBERTa、LLaMA和Gemma模型,并进行了可解释性分析。结果表明,模型在很大程度上与人类判断一致,但依赖于浅层模式匹配而非语义或语用推理。我们的工作提供了对先决条件问题的首个计算评估框架,强调了诊断性、多方法方法来评估语言模型语用能力和上下文依赖意义的重要性。

关键词

引用

@article{arxiv.2603.08358,
  title  = {Do Language Models Know Theo Has a Wife? Investigating the Proviso Problem},
  author = {Tara Azin and Daniel Dumitrescu and Diana Inkpen and Raj Singh},
  journal= {arXiv preprint arXiv:2603.08358},
  year   = {2026}
}