中文

ClimateCheck 2026:气候相关主张的科学事实核查与虚假信息叙事分类

计算与语言 2026-03-30 v1

摘要

自动根据科学文献验证气候相关主张是一项具有挑战性的任务,由于学术证据的专业性以及气候虚假信息背后修辞策略的多样性而变得复杂。ClimateCheck 2026 是应对这一挑战的共享任务的第二次迭代,在 2025 版的基础上将训练数据扩大三倍并新增了虚假信息叙事分类任务。该竞赛于 2026 年 1 月至 2 月在 CodaBench 平台上进行,吸引了 20 名注册参与者和 8 份排行榜提交,参赛系统结合了稠密检索流水线、跨编码器集成以及具有结构化分层推理的大语言模型。除标准评估指标(Recall@K 和二元偏好)外,我们还引入了一个自动化框架来评估在不完整标注下的检索质量,揭示了传统指标对系统进行排序时存在的系统性偏差。跨任务分析进一步表明,并非所有气候虚假信息都具有同等的可验证性,这可能意味着未来事实核查系统的设计应如何调整。

关键词

引用

@article{arxiv.2603.26449,
  title  = {ClimateCheck 2026: Scientific Fact-Checking and Disinformation Narrative Classification of Climate-related Claims},
  author = {Raia Abu Ahmad and Max Upravitelev and Aida Usmanova and Veronika Solopova and Georg Rehm},
  journal= {arXiv preprint arXiv:2603.26449},
  year   = {2026}
}

备注

Accepted at NSLP@LREC 2026