NoCoLA:挪威语语言可接受性语料库
计算与语言
2023-06-14 v1 人工智能
摘要
尽管近年来挪威语大型语言模型激增,我们仍缺乏任何工具来评估其对语法性的理解。我们为此任务提出了两个新的挪威语数据集。NoCoLA_class 是一个有监督的二分类任务,目标是区分可接受与不可接受的句子。另一方面,NoCoLA_zero 是一个纯粹的诊断性任务,用于以完全零样本的方式(即无需任何进一步训练)评估语言模型的语法判断能力。在本文中,我们详细描述这两个数据集,展示如何将其用于不同形式的语言模型,并对现有挪威语语言模型进行比较研究。
引用
@article{arxiv.2306.07790,
title = {NoCoLA: The Norwegian Corpus of Linguistic Acceptability},
author = {Matias Jentoft and David Samuel},
journal= {arXiv preprint arXiv:2306.07790},
year = {2023}
}
备注
Published at NoDaLiDa 2023