TimelineQA：一个面向时间线问答的基准
计算与语言
2023-06-05 v1 人工智能
信息检索
摘要
生活日志是对一个人一生中所经历体验的描述。生活日志通过融合来自众多数字服务（如在线照片、地图、购物和内容流媒体服务）的数据而创建。对生活日志的问答可为个人助理在语境中提供建议时提供关键资源。然而，由于多种原因，对生活日志获取答案超出了当前问答技术的最高水平，其中最显著的是生活日志将自由文本与某种程度的结构（如时间和地理信息）相结合。我们创建并公开发布TimelineQA1，一个用于加速生活日志查询进展的基准。TimelineQA生成虚构人物的生活日志。生活日志中的事件范围从高中毕业等重人生事件到日常事件如去跑步。我们描述了一组在TimelineQA上使用若干SOTA QA模型的实验。我们的实验揭示，对于原子查询，抽取式QA系统显著优于SOTA检索增强QA系统。对于涉及聚合的多跳查询，我们展示在假定用于推导答案的真实事件集可用的情况下，最佳结果由SOTA表格QA技术取得。
引用
@article{arxiv.2306.01069,
title = {TimelineQA: A Benchmark for Question Answering over Timelines},
author = {Wang-Chiew Tan and Jane Dwivedi-Yu and Yuliang Li and Lambert Mathias and Marzieh Saeidi and Jing Nathan Yan and Alon Y. Halevy},
journal= {arXiv preprint arXiv:2306.01069},
year = {2023}
}