逆向工程自然语言推理：自然语言推理的元推理属性研究
计算与语言
2026-01-12 v2
摘要
自然语言推理 (NLI) 一直是评估语言模型自然语言理解能力的重要任务，但该任务的逻辑属性鲜少被理解且常被错误刻画。理解 NLI 所蕴含的推理概念是解释模型在该任务上性能的关键。本文系统阐述了 NLI 标签集的三种可能解读，并对它们所蕴含的元推理属性进行了全面分析。聚焦于 SNLI 数据集，我们利用 (1) 具有共享前提的 NLI 项和 (2) 由 LLM 生成的项，来评估在 SNLI 上训练的模型的元推理一致性，并深入探究该数据集编码了哪种逻辑关系解读。
引用
@article{arxiv.2601.05170,
title = {Reverse-engineering NLI: A study of the meta-inferential properties of Natural Language Inference},
author = {Rasmus Blanck and Bill Noble and Stergios Chatzikyriakidis},
journal= {arXiv preprint arXiv:2601.05170},
year = {2026}
}