PerpectiveArg2024概览：首届视角论点检索共享任务
计算与语言
2024-07-30 v1
摘要
论点检索是为给定查询找到相关论点的任务。虽然现有方法仅依赖于查询和论点的语义对齐，但本次关于视角论点检索的首次共享任务将视角纳入检索过程，以考虑论证中的潜在影响。我们提出了一个新颖的多语言数据集，涵盖人口统计和社会文化（社会）变量，如年龄、性别和政治态度，代表了社会中的少数和多数群体。我们区分了三种场景，以探索检索系统如何考虑显式（在查询和语料库中）和隐式（仅在查询中）表达的视角。本文概述了该共享任务，并总结了六个提交系统的结果。我们发现，在纳入视角主义方面存在重大挑战，尤其是当仅基于文本进行个性化而不显式提供社会概况时。此外，检索系统倾向于偏向多数群体，但部分缓解了女性性别的偏见。虽然我们启动了视角论点检索，但进一步的研究对于优化检索系统以促进个性化和减少极化至关重要。
引用
@article{arxiv.2407.19670,
title = {Overview of PerpectiveArg2024: The First Shared Task on Perspective Argument Retrieval},
author = {Neele Falk and Andreas Waldis and Iryna Gurevych},
journal= {arXiv preprint arXiv:2407.19670},
year = {2024}
}