InkSight：在计算笔记本中利用草图交互记录图表发现
人机交互
2023-07-18 v1
摘要
计算笔记本因能在单一文档中支持数据探索与解释，已越来越受欢迎用于探索性数据分析。在探索过程中解释图表发现的有效文档记录至关重要，因为它有助于回忆和分享数据分析。然而，记录图表发现由于其耗时和繁琐的特性仍然是一项挑战。虽然现有的自动方法减轻了用户的一些负担，但它们往往无法满足用户的特定兴趣。针对这些局限，我们提出 InkSight，一个混合主动的计算笔记本插件，基于用户意图生成发现文档。InkSight 允许用户通过在可视化上方直观地草绘来表达其在特定数据子集上的意图。为此，我们设计了两类草图，即开放路径和封闭路径草图。接收到用户草图后，InkSight 识别草图类型及对应选中的数据项。随后，它基于草图和选中数据项过滤数据事实类型，再采用现有的自动数据事实推荐算法推断数据事实。利用大语言模型（GPT-3.5），InkSight 将数据事实转换为有效的自然语言文档。用户可在 InkSight 中便捷地微调生成的文档。一项有 12 名参与者的用户研究证明了 InkSight 在表达用户意图和促进图表发现文档记录方面的可用性与有效性。
引用
@article{arxiv.2307.07922,
title = {InkSight: Leveraging Sketch Interaction for Documenting Chart Findings in Computational Notebooks},
author = {Yanna Lin and Haotian Li and Leni Yang and Aoyu Wu and Huamin Qu},
journal= {arXiv preprint arXiv:2307.07922},
year = {2023}
}
备注
Accepted by VIS23