CliniQ：面向电子健康记录检索的多维基准，带语义匹配评估
信息检索
2025-04-09 v2 计算与语言
摘要
电子健康记录 (EHR) 检索在 various 临床任务中发挥关键作用，但由于缺乏公开可用的基准，开发受到严重阻碍。本文介绍一种新型公开 EHR 检索基准 CliniQ，以弥补这一差距。我们考虑两种检索设置：单患者检索和多患者检索，反映 various 实际场景。单患者检索侧重于在患者记录内部查找相关部分，而多患者检索涉及从多个患者中检索 EHR。我们基于 1000 份出院概述记录及其 ICD 编码和处方标签构建基准，通过进一步利用强大的大语言模型作为标注者，收集了 1246 个唯一查询及 77206 条相关性判断。此外，我们包括对 EHR 检索中语义差距问题的新型评估，通过将匹配类型分为字符串匹配和四类语义匹配来实现。我们在所提基准上对 various 检索方法进行全面评估，从传统的精确匹配到流行的稠密检索器。我们的实验发现，BM25 设定了强有力的基准并与稠密检索器竞争，一般领域的稠密检索器反而超过专为医学领域设计的检索器。在对 various 匹配类型进行深入分析后，我们揭示了不同方法的优势与不足，为有针对性的改进提供了启示。我们相信，CliniQ 基准将激励研究社区推动 EHR 检索系统的发展。
引用
@article{arxiv.2502.06252,
title = {CliniQ: A Multi-faceted Benchmark for Electronic Health Record Retrieval with Semantic Match Assessment},
author = {Zhengyun Zhao and Hongyi Yuan and Jingjing Liu and Haichao Chen and Huaiyuan Ying and Songchi Zhou and Yue Zhong and Sheng Yu},
journal= {arXiv preprint arXiv:2502.06252},
year = {2025}
}