作弊碗：开放域问答中人类与计算机的搜索策略对比

对于人类和计算机而言，回答开放域问题的第一步都是从大型语料库中检索一组相关文档。然而，计算机使用的策略与人类的根本不同。为了更好地理解这些差异，我们设计了一个用于数据收集的游戏化界面——Cheater's Bowl——其中人类可借助传统和现代搜索工具回答复杂问题。我们收集了人类搜索会话的数据集，分析了人类的搜索策略，并将其与最先进的多跳问答模型进行了比较。人类进行逻辑查询、应用动态搜索链，并利用世界知识来辅助搜索。我们展示了人类查询如何提升现有系统的准确率，并提议改进未来问答模型的设计。