知如何与知事实:面向用户手册机器理解的新任务
计算与语言
2023-08-10 v2
摘要
用户手册的机器阅读理解(MRC)在客户服务中具有巨大潜力。然而,现有方法难以回答复杂问题。为此,我们引入了“知如何与知事实”任务,要求模型回答关于用户手册的事实型、流程型以及不一致性问题。我们通过将步骤与事实联合表示为图 TARA 来解决该任务,其支持对各种问题的统一推理。为进行系统性基准研究,我们设计了一种启发式方法将用户手册自动解析为 TARA,并构建了标注数据集以测试模型回答真实世界问题的能力。实证结果表明,将用户手册表示为 TARA 是用户手册 MRC 的理想方案。对 TARA 的深入探究进一步揭示了未来用户手册表示的问题与更广泛影响。我们希望我们的工作能将用户手册 MRC 推向更复杂、更真实的阶段。
引用
@article{arxiv.2306.04187,
title = {Knowing-how & Knowing-that: A New Task for Machine Comprehension of User Manuals},
author = {Hongru Liang and Jia Liu and Weihong Du and Dingnan Jin and Wenqiang Lei and Zujie Wen and Jiancheng Lv},
journal= {arXiv preprint arXiv:2306.04187},
year = {2023}
}