DaNetQA:一个面向俄语的是/否问答数据集
计算与语言
2023-10-04 v2 信息检索
摘要
DaNetQA 是一个新的问答语料库,遵循 (Clark et. al, 2019) 的设计:它包含自然的是/否问题。每个问题配有一段来自维基百科的段落和一个由该段落得出的答案。任务是将问题和段落同时作为输入,并给出是/否答案,即产生一个二值输出。在本文中,我们提出了一种可复现的 DaNetQA 构建方法,并研究了用于任务和语言迁移的迁移学习方法。对于任务迁移,我们利用三个相似的句子建模任务:1) 一个释义语料库 Paraphraser,2) 一个 NLI 任务,为此我们使用 XNLI 的俄语部分,3) 另一个问答任务 SberQUAD。对于语言迁移,我们使用英语到俄语的翻译结合多语言微调。
引用
@article{arxiv.2010.02605,
title = {DaNetQA: a yes/no Question Answering Dataset for the Russian Language},
author = {Taisia Glushkova and Alexey Machnev and Alena Fenogenova and Tatiana Shavrina and Ekaterina Artemova and Dmitry I. Ignatov},
journal= {arXiv preprint arXiv:2010.02605},
year = {2023}
}
备注
Analysis of Images, Social Networks and Texts - 9 th International Conference, AIST 2020, Skolkovo, Russia, October 15-16, 2020, Revised Selected Papers. Lecture Notes in Computer Science (https://dblp.org/db/series/lncs/index.html), Springer 2020