TREC 2023 NeuCLIR 轨道概述
信息检索
2024-04-15 v1
摘要
TREC 神经跨语言信息检索(NeuCLIR)轨道的主要目标是研究神经方法对跨语言信息检索的影响。该轨道创建了四个数据集,包括大量中文、波斯文和俄文新闻专线数据集,以及一个较小的中文科学摘要数据集。主要任务是使用英文主题对三种语言之一的新闻进行排序检索。此外,还报告了多语言任务的结果,该任务同样使用英文主题,但文档来自所有三个新闻专线数据集。该轨道第二年新增了一项试点技术文档 CLIR 任务,即使用英文主题对中文技术文档进行排序检索。六个参与团队以及作为基线的轨道协调者跨所有任务共提交了 220 次运行。本文介绍了任务描述和结果。
引用
@article{arxiv.2404.08071,
title = {Overview of the TREC 2023 NeuCLIR Track},
author = {Dawn Lawrie and Sean MacAvaney and James Mayfield and Paul McNamee and Douglas W. Oard and Luca Soldaini and Eugene Yang},
journal= {arXiv preprint arXiv:2404.08071},
year = {2024}
}
备注
27 pages, 17 figures. Part of the TREC 2023 Proceedings