中文

BERTScoreVisualizer:用于理解简化文本评估的Web工具

计算与语言 2024-09-27 v1

摘要

BERTScore指标常用于评估自动文本简化系统。然而,当前的BERTScore实现未能提供该指标可产生的全部信息的可见性。值得注意的是,特定的token匹配对于生成文本简化质量的子句层次见解非常有用。为此,我们提出了BERTScoreVisualizer,一个Web应用程序,超越报告精确率、召回率和F1分数,提供token之间匹配的可视化。我们认为,该软件有助于改进文本简化系统的分析,具体显示生成的简化文本与参考文本之间的偏差位置。我们在GitHub上托管了代码和演示。

关键词

引用

@article{arxiv.2409.17160,
  title  = {BERTScoreVisualizer: A Web Tool for Understanding Simplified Text Evaluation with BERTScore},
  author = {Sebastian Jaskowski and Sahasra Chava and Agam Shah},
  journal= {arXiv preprint arXiv:2409.17160},
  year   = {2024}
}