PreCog：在获取前提升众包数据质量
数据库
2017-04-11 v1 人机交互
摘要
众包系统中的质量控制至关重要。通常在数据收集后完成，常使用额外的众包任务评估和提升质量。这些事后方法容易给获取过程增加成本和延迟——尤其在收集高质量数据时。本文主张基于反馈的事前界面优化，帮助工人在提交前提升数据质量，非常适合补充事后技术。我们提出 Precog 系统，明确支持针对常见完整性约束以及质量定义模糊的文本获取任务的此类界面优化。然后我们开发 Segment-Predict-Explain 模式用于检测低质量文本段并生成规范性解释以帮助工人改进文本输入。我们独特的分割与规范性解释的结合对于 Precog 在两个真实领域收集比非 Precog 方法多 2 倍的高质量文本数据是必要的。
引用
@article{arxiv.1704.02384,
title = {PreCog: Improving Crowdsourced Data Quality Before Acquisition},
author = {Hamed Nilforoshan and Jiannan Wang and Eugene Wu},
journal= {arXiv preprint arXiv:1704.02384},
year = {2017}
}