HAUSER：面向明喻生成的整体式自动评估系统
计算与语言
2023-06-14 v1
摘要
明喻在故事与对话生成等创意写作中起着重要作用。恰当的评估指标犹如灯塔，指引明喻生成（SG）的研究。然而，应考虑哪些标准、如何将各标准量化为指标、以及这些指标是否对全面、高效且可靠的 SG 评估有效，仍鲜有探索。为解决这些问题，我们建立了 HAUSER，一个面向 SG 任务的整体式自动评估系统，其包含来自三个视角的五项标准及各项标准对应的自动指标。通过大量实验，我们验证了相比已有自动指标，我们的指标与来自各视角的人类评分显著更具相关性。
引用
@article{arxiv.2306.07554,
title = {HAUSER: Towards Holistic and Automatic Evaluation of Simile Generation},
author = {Qianyu He and Yikai Zhang and Jiaqing Liang and Yuncheng Huang and Yanghua Xiao and Yunwen Chen},
journal= {arXiv preprint arXiv:2306.07554},
year = {2023}
}