他们在讨论什么？面向知识 grounding 对话摘要的基准

传统的对话摘要主要关注对话内容，假设其包含足够的信息用于生成清晰的摘要。然而，这一假设在以共享背景为 grounding 的讨论中常常失败，参与者经常省略上下文并使用隐式指代，这导致对缺乏背景知识的读者而言摘要令人困惑。为此，我们提出知识 grounding 对话摘要 (Knowledge-Grounded Discussion Summarization, KGDS) 这一新任务，旨�产生用于上下文的补充背景摘要，以及经过澄清指代的清晰意见摘要。为促进研究，我们构建了第一个 KGDS 基准，包含新闻讨论对组合及专家创建的多层次金标注释，用于评估子摘要。我们还提出了一种新颖的层次化评估框架，包含细粒度且可解释的指标。我们的广泛评估表明，KGDS 仍是一个重要的挑战。模型在背景摘要中经常遗漏关键事实并保留无关信息，意见摘要集成中也常常无法解决隐式指代。