CycleChart：基于一致性的双向图表理解与生成统一框架
计算与语言
2026-04-10 v2 计算机视觉与模式识别
摘要
当前图表相关任务（如图表生成 (NL2Chart)、图表模式解析、图表数据解析和图表问答 (ChartQA)）通常各自独立进行，阻碍模型学习连接图表创建与解释的共享语义。我们提出 CycleChart，这是面向双向图表理解与生成的一致性学习框架。不同于传统多任务方法在不同任务之间独立抽取训练样本，CycleChart 将所有任务围绕单个数据实例进行组织。从 source table 和自然语言查询出发，模型生成图表 specification，render 并执行它，然后学习从 resulting chart image 中恢复 schema 和 underlying data。这种 per-instance lifecycle 设计使模型能捕获完整的转换链路：从原始数据经视觉编码到结构化恢复，generate--parse 一致性目标 enforces chart 生成与 reverse 解析方向之间的语义对齐。为支持此框架，我们构建 CycleChart-Bench，一个 lifecycle 对齐的基准，每个图表样本均包含 generation、schema 解析、data 解析和 question answering 的对齐注释。CycleChart 在所有四个任务上取得优异成绩，并对不可见外部基准实现有效迁移，显示出 improved cross-task generalization，标志着通用图表理解模型的进一步发展。
关键词
引用
@article{arxiv.2512.19173,
title = {CycleChart: A Unified Consistency-Based Learning Framework for Bidirectional Chart Understanding and Generation},
author = {Dazhen Deng and Sen Yang and Yuchen He and Yuan Tian and Yingcai Wu},
journal= {arXiv preprint arXiv:2512.19173},
year = {2026}
}