BERTScoreVisualizer:用于理解简化文本评估的Web工具
计算与语言
2024-09-27 v1
摘要
BERTScore指标常用于评估自动文本简化系统。然而,当前的BERTScore实现未能提供该指标可产生的全部信息的可见性。值得注意的是,特定的token匹配对于生成文本简化质量的子句层次见解非常有用。为此,我们提出了BERTScoreVisualizer,一个Web应用程序,超越报告精确率、召回率和F1分数,提供token之间匹配的可视化。我们认为,该软件有助于改进文本简化系统的分析,具体显示生成的简化文本与参考文本之间的偏差位置。我们在GitHub上托管了代码和演示。
引用
@article{arxiv.2409.17160,
title = {BERTScoreVisualizer: A Web Tool for Understanding Simplified Text Evaluation with BERTScore},
author = {Sebastian Jaskowski and Sahasra Chava and Agam Shah},
journal= {arXiv preprint arXiv:2409.17160},
year = {2024}
}