中文

OAEI-LLM:用于理解本体匹配中大型语言模型幻觉的基准数据集

人工智能 2026-01-30 v6 计算与语言 信息检索

摘要

大型语言模型的幻觉常出现在特定领域的下游任务中,本体匹配也不例外。在OM中使用LLM的日益普遍,引发了对基准测试的需求,以更好地理解LLM幻觉。OAEI-LLM数据集是本体对齐评估倡议数据集的扩展版本,用于评估OM任务中LLM特有的幻觉。我们概述了数据集构建和模式扩展中使用的方法,并提供了潜在用例的示例。

关键词

引用

@article{arxiv.2409.14038,
  title  = {OAEI-LLM: A Benchmark Dataset for Understanding Large Language Model Hallucinations in Ontology Matching},
  author = {Zhangcheng Qiang and Kerry Taylor and Weiqing Wang and Jing Jiang},
  journal= {arXiv preprint arXiv:2409.14038},
  year   = {2026}
}

备注

5 pages, 1 figure, 1 table, 1 code snippet