NUBIA:基于神经网络的文本生成可互换性评估器
计算与语言
2020-05-04 v2 机器学习
摘要
我们提出NUBIA,一种仅以机器学习模型为核心组件来构建文本生成自动评估指标的方法。一个典型的NUBIA模型由三个模块组成:神经特征提取器、聚合器和校准器。我们展示了NUBIA的一种实现,其性能优于当前用于评估机器翻译、摘要的指标,并在与人类判断的相关性上于WMT片段级直接评估任务、句子级排序和图像字幕评估中略微超过/匹配最先进的指标。所实现的模型是模块化的、可解释的,并设定为随时间持续改进。
引用
@article{arxiv.2004.14667,
title = {NUBIA: NeUral Based Interchangeability Assessor for Text Generation},
author = {Hassan Kane and Muhammed Yusuf Kocyigit and Ali Abdalla and Pelkins Ajanoh and Mohamed Coulibali},
journal= {arXiv preprint arXiv:2004.14667},
year = {2020}
}
备注
8 pages, 5 tables, and 2 figures