面向众包的 NLP 标注可视化
计算与语言
2015-08-26 v1
摘要
可视化 NLP 标注对于为统计 NLP 方法收集训练数据非常有用。现有的工具包要么提供有限的视觉辅助，要么引入复杂的操作符以实现复杂的语言学规则。工作者必须经过良好的培训才能使用它们。因此，其受众很难扩展到大量非专家众包工作者。在本文中，我们提出了 CROWDANNO，一个可视化工具包，允许众包工作者对两大类一般 NLP 问题进行标注：聚类和句法分析。工作者可以在交互式界面中使用简化的操作符完成任务，并方便地修正错误。用户研究表明，我们的工具包对 NLP 非专家非常友好，并允许他们为几个复杂问题生成高质量标签。我们发布了源代码和工具包以促进未来的研究。
引用
@article{arxiv.1508.06044,
title = {Visualizing NLP annotations for Crowdsourcing},
author = {Hanchuan Li and Haichen Shen and Shengliang Xu and Congle Zhang},
journal= {arXiv preprint arXiv:1508.06044},
year = {2015}
}