模拟虚拟助手 API 使用对话的 Wizard of Oz 研究
软件工程
2021-06-25 v1 人机交互
摘要
虚拟助手技术正迅速普及,以提升各类任务中的生产力。尽管若干面向日常任务的虚拟助手已广为人知(如 Siri、Cortana、Alexa),但用于软件工程等专业任务的助手仍较为稀少。软件工程助手稀少的一个关键原因是,可用于训练作为当前虚拟助手基石的 AI 的实验数据集极少且适用者寥寥。在本文中,我们提出一组 Wizard of Oz 实验,旨在构建用于创建虚拟助手的数据集。我们的目标是一个假想的、帮助程序员使用 API 的虚拟助手。在实验中,我们招募了 30 名专业程序员,使用两个 API 完成编程任务。程序员与模拟的虚拟助手交互以获取帮助——程序员并未察觉助手实际由人类专家操控。随后,我们沿四个维度标注语料中的对话行为:言外意图、API 信息类型、回溯功能以及对特定 API 组件的可追溯性。我们观察到多样化的交互,这将促进面向 API 使用的虚拟助手对话策略的开发。
引用
@article{arxiv.2106.12645,
title = {A Wizard of Oz Study Simulating API Usage Dialogues with a Virtual Assistant},
author = {Zachary Eberhart and Aakash Bansal and Collin McMillan},
journal= {arXiv preprint arXiv:2106.12645},
year = {2021}
}