万千光彩并非黄金：基于参考无关的金融虚假信息检测基准
计算与语言
2026-01-12 v3 计算工程、金融与科学
计算金融
摘要
我们介绍了 RFC Bench，这是一个用于评估大型语言模型在真实新闻情境下进行金融虚假信息检测的基准测试。RFC Bench 在段落层面运行，捕捉金融新闻中上下文复杂性的特征，即含义从分散的线索中涌现。该基准定义了两个互补任务：参考无关的虚假信息检测和基于配对原输入与扰动输入的比较诊断。实验揭示了一致模式：当比较上下文可用时，性能显著提升，而参考无关设置则暴露出显著弱点，包括预测不稳定和错误输出 elevated。这些结果表明当前模型在无外部 grounding 条件下难以维持连贯的信念状态。通过凸显这一差距，RFC Bench 提供了一个结构化的测试平台，用于研究参考无关推理并推动更可靠的金融虚假信息检测在现实场景中的应用。
引用
@article{arxiv.2601.04160,
title = {All That Glisters Is Not Gold: A Benchmark for Reference-Free Counterfactual Financial Misinformation Detection},
author = {Yuechen Jiang and Zhiwei Liu and Yupeng Cao and Yueru He and Ziyang Xu and Chen Xu and Zhiyang Deng and Prayag Tiwari and Xi Chen and Alejandro Lopez-Lira and Jimin Huang and Junichi Tsujii and Sophia Ananiadou},
journal= {arXiv preprint arXiv:2601.04160},
year = {2026}
}
备注
48 pages; 24 figures