FoQA：一个法洛群问答数据集
计算与语言
2025-02-12 v1 机器学习
摘要
我们提出 FoQA，这是一个包含 2,000 个样本的法洛群提取式问答（QA）数据集，采用半自动化方法结合大语言模型（LLM）和人类验证进行创建。该数据集由法洛群维基百科文章生成，利用 GPT-4-turbo 进行初始 QA 生成，随后进行问题改写以增加复杂度，并进行本地语言使用者验证以确保质量。我们提供了 FoQA 在多种模型上的基线性能指标，包括 LLM 和 BERT，展示了其在评估法洛群 QA 性能方面的有效性。该数据集以三个版本发布：包含 2,000 个经验证样本的验证集、全部 10,001 个生成样本的完整集，以及 2,395 个被拒样本用于错误分析。
引用
@article{arxiv.2502.07642,
title = {FoQA: A Faroese Question-Answering Dataset},
author = {Annika Simonsen and Dan Saattrup Nielsen and Hafsteinn Einarsson},
journal= {arXiv preprint arXiv:2502.07642},
year = {2025}
}
备注
Camera-ready version for RESOURCEFUL workshop, 2025