软件众包中任务多样性模式及其影响研究
人机交互
2020-07-31 v2 人工智能
软件工程
摘要
背景:软件众包的成功依赖于稳定的任务供给与活跃的工人池。已有分析揭示软件众包市场中平均任务失败率为 15.7%。目标:本研究的目的是实证考察软件众包平台中任务多样性的模式与影响,以提升软件众包的成功率与效率。方法:我们提出一个概念性任务多样性模型,并开发一种度量与分析任务多样性的方法。更具体地,这包括对相似任务分组、基于竞争水平对任务排序并识别区分这些水平的主导属性,进而研究任务多样性对众包平台中任务成功与工人绩效的影响。实证研究基于领先软件众包平台 TopCoder 超过一年的真实数据展开。结果:我们识别出金钱奖励与任务复杂度是区分不同竞争水平的主导属性。基于这些主导属性,我们从工人行为视角发现了三种任务多样性模式(配置):对奖励响应、对奖励与复杂度响应、以及对奖励过度响应。本研究支持:1)对奖励响应配置在平台中提供最高水平的任务密度与工人可靠性;2)对奖励与复杂度响应配置可吸引高水平可信工人;3)对奖励过度响应配置对非高度相似任务而言在平台中带来最高任务稳定性与最低失败率。
引用
@article{arxiv.2006.00871,
title = {Study on Patterns and Effect of Task Diversity in Software Crowdsourcing},
author = {Denisse Martinez Mejorado and Razieh Saremi and Ye Yang and Jose E. Ramirez-Marquez},
journal= {arXiv preprint arXiv:2006.00871},
year = {2020}
}
备注
10 pages, 8 figures, 3 tables