“还有什么我可以帮您的吗？”：部署按需众包驱动对话代理的挑战

智能对话助手，如 Apple 的 Siri、Microsoft 的 Cortana 和 Amazon 的 Echo，已迅速成为我们数字生活的一部分。然而，这些助手存在主要局限性，阻碍了用户像与人类对话伙伴交谈那样与它们交流。这限制了我们观察用户真正希望如何与底层系统交互的能力。为解决此问题，我们开发了一个众包驱动的对话助手 Chorus，并部署它以观察用户和工作者在系统中介下如何共同交互。Chorus 通过按需招募工作者，随着时间推移与终端用户进行深入对话，工作者进而决定对每句用户输入的最佳回复可能是什么。在我们部署的第一个月内，59 名用户在 320 次对话会话中与 Chorus 进行了交谈。本文中，我们描述了 Chorus 的部署情况，重点关注四个挑战： 识别对话何时结束， 恶意用户与工作者， 按需招募，以及 共识不足的情境。我们的观察可辅助众包驱动对话系统及一般众包驱动系统的部署。