LED 坠入兔子洞:探索全局注意力在生物医学多文档摘要中的潜力
计算与语言
2022-09-20 v1
摘要
本文报告了我们向文献综述多文档摘要(MSLR)共享任务的提交。具体而言,我们通过以多种方式在重要生物医学实体上施加全局注意力,将 PRIMERA(Xiao et al., 2022)适配到生物医学领域。我们分析了 23 个所得模型的输出,并报告了与额外全局注意力的存在、训练步数以及输入配置相关的结果模式。
引用
@article{arxiv.2209.08698,
title = {LED down the rabbit hole: exploring the potential of global attention for biomedical multi-document summarisation},
author = {Yulia Otmakhova and Hung Thinh Truong and Timothy Baldwin and Trevor Cohn and Karin Verspoor and Jey Han Lau},
journal= {arXiv preprint arXiv:2209.08698},
year = {2022}
}
备注
SDP Workshop at COLING 2022