查询更聪明,更可信?探索验证新闻准确性的搜索行为
信息检索
2025-04-08 v1
摘要
虽然经常假设搜索信息以评估误information会有助于识别虚假声明,但近期的研究表明,搜索行为可能反而加强用户对误导性新闻信念,尤其是当用户使用来自来源文章的词汇生成查询时。我们的研究探讨了不同的查询生成策略如何影响新闻验证,以及人们的搜索方式是否影响其信息评估的准确性。采用混合方法,包括三个部分:(1)分析现有数据以了解搜索行为如何影响对虚假新闻的信任;(2)使用大型语言模型(LLM)模拟查询生成策略,以评估不同查询公式对搜索结果质量的影响;(3)用户研究,以检查'Boost'干预在界面设计中的作用,旨在引导用户采用更有效的查询策略。结果显示,搜索行为显著影响对新闻的信任,成功的搜索涉及多个查询并产生更高质量的结果。来自新闻文章不同部分的查询产生了质量不同的搜索结果,弱初始查询在使用完整 SERP 信息进行重新表述后得到改进。虽然'Boost'干预的影响有限,但该研究表明,界面设计鼓励用户充分审查搜索结果可以提高查询公式。该研究突显了查询策略在评估新闻中的重要性,并提出界面设计可以发挥关键作用,以促进更有效的搜索实践,作为更广泛干预组合中的一个组成部分来遏制虚假信息。
引用
@article{arxiv.2504.05146,
title = {Query Smarter, Trust Better? Exploring Search Behaviours for Verifying News Accuracy},
author = {David Elsweiler and Samy Ateia and Markus Bink and Gregor Donabauer and Marcos Fernández Pichel and Alexander Frummet and Udo Kruschwitz and David Losada and Bernd Ludwig and Selina Meyer and Noel Pascual Presa},
journal= {arXiv preprint arXiv:2504.05146},
year = {2025}
}
备注
12 pages, Pre-Print SIGIR 2025