真实场景下文本风格迁移自动评估的艰巨任务
计算与语言
2019-10-11 v2
摘要
文本风格迁移的难点在于缺乏平行语料。针对无监督生成已提出众多进展，但风格迁移任务的自动评估仍存在显著问题。基于 Pang 与 Gimpel（2018）及 Mir 等人（2019）的总结，风格迁移评估依赖三项准则：迁移句子的风格准确性、原句与迁移句之间的内容相似度，以及迁移句子的流畅度。我们阐明了风格迁移研究当前存在的问题状态。鉴于当前任务并不能代表风格迁移的真实用例，当前的自动评估方法是有缺陷的。本讨论旨在促使研究者思考风格迁移及风格迁移评估研究的未来。
引用
@article{arxiv.1910.03747,
title = {The Daunting Task of Real-World Textual Style Transfer Auto-Evaluation},
author = {Richard Yuanzhe Pang},
journal= {arXiv preprint arXiv:1910.03747},
year = {2019}
}
备注
Extended abstract in EMNLP Workshop on Neural Generation and Translation (WNGT 2019)