中文

基于查询-话语注意力联合建模的查询聚焦会议摘要

计算与语言 2023-06-02 v3 人工智能

摘要

查询聚焦会议摘要(QFMS)旨在根据给定查询从会议转录文本中生成摘要。先前的工作通常将查询与会议转录文本拼接,并仅通过注意力机制在词元级别隐式建模查询相关性。然而,由于长会议转录文本导致关键查询相关信息被稀释,原始的基于transformer的模型不足以突出与查询相关的关键部分。在本文中,我们提出了一种基于查询-话语注意力的、联合建模词元与话语的查询感知框架。它使用稠密检索模块计算话语级别与查询的相关性。然后将词元级查询相关性和话语级查询相关性相结合,并通过注意力机制显式地融入生成过程。我们表明,不同粒度的查询相关性有助于生成与查询更相关的摘要。在QMSum数据集上的实验结果表明,所提出的模型取得了新的最先进性能。

关键词

引用

@article{arxiv.2303.04487,
  title  = {Query-Utterance Attention with Joint modeling for Query-Focused Meeting Summarization},
  author = {Xingxian Liu and Bin Duan and Bo Xiao and Yajing Xu},
  journal= {arXiv preprint arXiv:2303.04487},
  year   = {2023}
}

备注

Accepted by ICASSP 2023