面向法律文档摘要的评估框架
计算与语言
2022-05-18 v1 信息检索
机器学习
摘要
法律从业者在其各类案件（如土地纠纷、腐败等）的实践中，需要查阅大量冗长的法律案件诉讼文书。因此，对这些文档进行摘要非常重要，并需确保摘要中包含的短语意图与案件类别相匹配。据我们所知，目前尚无基于意图评估摘要的评估指标。我们提出了一种基于意图的自动摘要指标，在人类满意度方面，与 BLEU、ROUGE-L 等其他自动指标相比，该指标与人类评估展现出更好的一致性。我们还通过标注法律文档中的意图短语构建了一个数据集，并展示了如何将该系统自动化的概念验证。此外，用于生成可复现结果的所有代码和数据均可在 Github 上获取。
引用
@article{arxiv.2205.08478,
title = {An Evaluation Framework for Legal Document Summarization},
author = {Ankan Mullick and Abhilash Nandy and Manav Nitin Kapadnis and Sohan Patnaik and R Raghav and Roshni Kar},
journal= {arXiv preprint arXiv:2205.08478},
year = {2022}
}
备注
7 pages, 7 figures, 5 tables, To appear in LREC 2022