OAEI-LLM:用于理解本体匹配中大型语言模型幻觉的基准数据集
人工智能
2026-01-30 v6 计算与语言
信息检索
摘要
大型语言模型的幻觉常出现在特定领域的下游任务中,本体匹配也不例外。在OM中使用LLM的日益普遍,引发了对基准测试的需求,以更好地理解LLM幻觉。OAEI-LLM数据集是本体对齐评估倡议数据集的扩展版本,用于评估OM任务中LLM特有的幻觉。我们概述了数据集构建和模式扩展中使用的方法,并提供了潜在用例的示例。
引用
@article{arxiv.2409.14038,
title = {OAEI-LLM: A Benchmark Dataset for Understanding Large Language Model Hallucinations in Ontology Matching},
author = {Zhangcheng Qiang and Kerry Taylor and Weiqing Wang and Jing Jiang},
journal= {arXiv preprint arXiv:2409.14038},
year = {2026}
}
备注
5 pages, 1 figure, 1 table, 1 code snippet