未检测与被忽视：针对大语言模型中的复选框盲区引入 CheckboxQA
计算与语言
2025-04-16 v2
摘要
复选框在实际文档处理中至关重要，其是否被勾选直接决定数据提取和决策过程。然而，尽管大型视觉语言模型在广泛的任务中表现出色，但在解释可勾选内容方面仍存在困难。在行业领域中，一处被忽略的复选框可能导致高昂的监管或合同失误。为此，我们引入了 CheckboxQA 数据集，这是一个针对复选框相关任务进行评估和提升模型性能的定向资源。数据集揭示了当前模型的局限性，并为推动文档理解系统的发展提供了重要工具，对法律科技和金融等行业应用具有重要意义。该数据集已公开提供：https://github.com/Snowflake-Labs/CheckboxQA
关键词
引用
@article{arxiv.2504.10419,
title = {Unchecked and Overlooked: Addressing the Checkbox Blind Spot in Large Language Models with CheckboxQA},
author = {Michał Turski and Mateusz Chiliński and Łukasz Borchmann},
journal= {arXiv preprint arXiv:2504.10419},
year = {2025}
}