中文

AIGT:基于提示词的 AI 生成表格

人工智能 2024-12-25 v1

摘要

表格数据占据企业数据资产的80%以上,在各个领域至关重要。随着对隐私保护和数据共享限制的日益关注,生成高质量的合成表格数据变得至关重要。最近的进展表明,大型语言模型(LLM)能够通过利用语义信息来生成逼真的表格数据,从而克服了由于 one-hot 编码导致的高维数据挑战。然而,现有方法未充分利用表格中可用的丰富信息。为此,我们提出一种基于提示增强的 AI 生成表格(AIGT),该方法利用表描述和模式等元数据信息作为提示来生成超高质量的合成数据。为了克服 LLM 的 token 限制,我们提出了长 token 分区算法,使 AIGT 能够建模任意规模的表格。AIGT 在 20 个公开数据集和两个实际行业数据集(支付宝风险控制系统)上实现了最先进的性能。

关键词

引用

@article{arxiv.2412.18111,
  title  = {AIGT: AI Generative Table Based on Prompt},
  author = {Mingming Zhang and Zhiqing Xiao and Guoshan Lu and Sai Wu and Weiqiang Wang and Xing Fu and Can Yi and Junbo Zhao},
  journal= {arXiv preprint arXiv:2412.18111},
  year   = {2024}
}