中文

CC-GSEO-Bench:衡量生成式搜索引擎中源头影响力的内容导向基准

计算与语言 2025-12-29 v2

摘要

生成式搜索引擎(Generative Search Engines, GSEs)从多个来源合成对话式答案,削弱了搜索排名与数字可见度之间长期存在的关联。这种转变为内容创作者提出了一个核心问题:如何可靠地量化一个来源文章在不同意图和后续问题下的影响力?我们引入 CC-GSEO-Bench,一个内容导向的基准测试,融合大规模数据集与创作者导向的评估框架。数据集包含超过 1,000 篇来源文章和 5,000 多条查询-文章对,按一对多结构组织,以实现文章级别的评估。我们以真实检索为基础,将来自公共问答数据集的种子查询与有限的合成数据增强相结合,仅保留在后续检索步骤中,其配对来源仍然出现的查询。在此数据集之上,我们沿三个核心维度衡量影响力:暴露度(Exposure)、忠实归属(Faithful Credit)和因果影响(Causal Impact),以及两个内容质量维度:可读性与结构(Readability and Structure),可信度与安全性(Trustworthiness and Safety)。我们聚合每个文章查询簇的查询级信号,以总结影响力强度、覆盖范围和稳定性,并经验性地刻画了不同内容模式下的影响力动态。

关键词

引用

@article{arxiv.2509.05607,
  title  = {CC-GSEO-Bench: A Content-Centric Benchmark for Measuring Source Influence in Generative Search Engines},
  author = {Qiyuan Chen and Jiahe Chen and Hongsen Huang and Qian Shao and Jintai Chen and Renjie Hua and Hongxia Xu and Ruijia Wu and Ren Chuan and Jian Wu},
  journal= {arXiv preprint arXiv:2509.05607},
  year   = {2025}
}

备注

Technical Report