VIRATrustData:一个关于 COVID-19 疫苗的人机对话信任标注语料库
计算与语言
2022-05-25 v1
摘要
公众对于医疗信息的信任对于疫苗接种等公共卫生政策的成功实施至关重要。当信息由近年来日益流行的聊天机器人远程提供时,这一点尤为真切。在此,我们探索人机对话轮次级信任分类这一挑战性任务。我们依赖于近期发布的、通过观测收集(而非众包)的与 VIRA 聊天机器人(一个 COVID-19 疫苗信息资源助手)的对话数据。这些对话围绕关于 COVID-19 疫苗的问题与担忧展开,其中信任问题尤为尖锐。我们将 个 VIRA 系统-用户对话轮次标注为低机构信任或低代理信任 vs. 中性或高信任。我们发布了标注数据集 VIRATrustData,据我们所知这是此类首个数据集。我们展示了该任务并非平凡,并比较了若干预测不同信任级别的模型。
引用
@article{arxiv.2205.12240,
title = {VIRATrustData: A Trust-Annotated Corpus of Human-Chatbot Conversations About COVID-19 Vaccines},
author = {Roni Friedman and João Sedoc and Shai Gretz and Assaf Toledo and Rose Weeks and Naor Bar-Zeev and Yoav Katz and Noam Slonim},
journal= {arXiv preprint arXiv:2205.12240},
year = {2022}
}