SceneLoom：用场景语境传递数据
人机交互
2025-07-29 v2
摘要
在数据驱动的叙事情境中，如数据新闻和数据视频中，数据可视化常与真实世界图像并列呈现，以支持叙事语境。然而，这些可视化和情境图像通常保持分离，限制了其组合叙事表达和参与度。实现这一目标具有挑战性，主要涉及细粒度对齐和创意构思的需求。为此，我们提出了 SceneLoom，一个由视觉-语言模型 (VLM) 驱动的系统，通过叙事意图促进数据可视化与真实世界图像的协调。在形式化研究中，我们从视觉对齐和语义连贯性的角度探讨了数据可视化与真实场景之间协调关系的设计空间。基于所推导出的设计考量，SceneLoom 利用 VLM 从场景图像和数据可视化中提取视觉和语义特征，并通过融合空间组织、形状相似性、布局一致性和语义绑定的推理过程执行设计映射。系统生成一组在视觉、语义和数据维度上实现连贯对齐的情境表达性设计备选方案。用户可以探索这些备选方案，选择喜欢的映射，并通过交互式调整和动画过渡进行进一步细化，以支持表达性数据通信。用户研究和示例画廊验证了 SceneLoom 在激发创意设计和促进设计外化方面的有效性。
引用
@article{arxiv.2507.16466,
title = {SceneLoom: Communicating Data with Scene Context},
author = {Lin Gao and Leixian Shen and Yuheng Zhao and Jiexiang Lan and Huamin Qu and Siming Chen},
journal= {arXiv preprint arXiv:2507.16466},
year = {2025}
}