中文

DataTales:面向真实世界智能数据叙述的基准

人工智能 2025-08-26 v2

摘要

我们提出 DataTales,一个新颖的基准,用于评估语言模型在数据叙述方面的能力,这是将复杂表格数据转化为可访问叙述的关键任务。现有基准往往不足以捕捉实际应用所需的分析复杂度。DataTales 通过提供 4900 份财务报告配合相应的市场数据,展示了模型需创建清晰叙述、分析大规模数据集并理解该领域专用术语的需求。我们的发现表明,语言模型在实现数据叙述所需的精确度和分析深度方面面临重大挑战,这为未来的模型发展和评估方法提供了有前景的方向。

关键词

引用

@article{arxiv.2410.17859,
  title  = {DataTales: A Benchmark for Real-World Intelligent Data Narration},
  author = {Yajing Yang and Qian Liu and Min-Yen Kan},
  journal= {arXiv preprint arXiv:2410.17859},
  year   = {2025}
}

备注

Accepted at EMNLP 2024 (main conference, long paper)