危机相关社交媒体的跨语言查询式摘要:一种基于 Transformer 的抽取式方法
信息检索
2022-04-22 v1 计算与语言
计算机与社会
摘要
危机期间从社交媒体收集的相关且及时的信息,对应急管理而言是极具价值的资源。然而,提取这些信息仍是一项具有挑战性的任务,尤其是在处理多语言社交媒体帖子时。本文提出一种跨语言方法,用于检索并摘要社交媒体帖子中的危机相关信息。我们描述了一种通过结构化查询表达各类信息需求的统一方式,以及生成回应这些信息需求的摘要的方法。该方法基于多语言 Transformer 嵌入。查询以嵌入所支持的语言之一书写,而被提取的句子可以是其他任一受支持语言。摘要由 Transformer 以生成式方式创建。通过众包评估者与应急管理专家在五次大规模灾害(涵盖十种语言)期间从 Twitter 提取的数据集上进行的评估,显示了我们方法的灵活性。与现有最先进方法相比,所生成的摘要被认为更具聚焦性、结构性与连贯性,专家将其与现有最先进方法生成的摘要进行了有利对比。
引用
@article{arxiv.2204.10230,
title = {Cross-Lingual Query-Based Summarization of Crisis-Related Social Media: An Abstractive Approach Using Transformers},
author = {Fedor Vitiugin and Carlos Castillo},
journal= {arXiv preprint arXiv:2204.10230},
year = {2022}
}