风格迁移中的人工评估综述
计算与语言
2021-06-10 v1
摘要
本文针对风格迁移、语义保持和流畅性三个主要评估方面，对97篇风格迁移论文中描述的人工评估实践进行了回顾与总结。原则上，由人工评分者进行的评估应当是最可靠的。然而，在风格迁移论文中，我们发现人工评估的协议往往缺乏详细说明且未标准化，这阻碍了该领域研究的可复现性，以及朝向更好的人工与自动评估方法的进展。
引用
@article{arxiv.2106.04747,
title = {A Review of Human Evaluation for Style Transfer},
author = {Eleftheria Briakou and Sweta Agrawal and Ke Zhang and Joel Tetreault and Marine Carpuat},
journal= {arXiv preprint arXiv:2106.04747},
year = {2021}
}
备注
GEM 2021