Verify-in-the-Graph:基于交互式图表示的复杂声明验证实体消歧增强
计算与语言
2025-05-30 v1 人工智能
数据库
信息检索
摘要
声明验证是一项长期且具有挑战性的任务,不仅要求高准确率,还要求验证过程的可解释性。在大型语言模型时代,由于现实世界的声明通常是复杂的,具有错综复杂的语义结构或模糊的实体,这项任务成为了一个新兴的研究问题。传统方法通常通过将声明分解为子声明并查询知识库来解决隐藏或模糊的实体。然而,缺乏对这些实体的有效消歧策略可能会损害整个验证过程。为了应对这些挑战,我们提出了 Verify-in-the-Graph (VeGraph),一种利用 LLM 智能体推理与理解能力的新颖框架。VeGraph 分三个阶段运行:(1) 图表示——输入声明被分解为结构化三元组,形成整合了结构化和非结构化信息的基于图的表示;(2) 实体消歧——VeGraph 迭代地与知识库交互,以解决图中模糊的实体,从而进行更深层的子声明验证;以及 (3) 验证——验证剩余的三元组以完成事实核查过程。使用 Meta-Llama-3-70B(指令版本)的实验表明,VeGraph 在 HoVer 和 FEVEROUS 两个基准测试上取得了与基线相比具有竞争力的性能,有效解决了声明验证的挑战。我们的源代码和数据可供进一步利用。
引用
@article{arxiv.2505.22993,
title = {Verify-in-the-Graph: Entity Disambiguation Enhancement for Complex Claim Verification with Interactive Graph Representation},
author = {Hoang Pham and Thanh-Do Nguyen and Khac-Hoai Nam Bui},
journal= {arXiv preprint arXiv:2505.22993},
year = {2025}
}
备注
Published at NAACL 2025 Main Conference