数据剧本:带标注旁白的数据视频创作
人机交互
2024-10-07 v1
摘要
创建能够有效叙述动画数据故事的数据视频需要大量的工作和专业知识。一个有前景的研究趋势是利用易于使用的自然语言(NL)交互,从叙事内容(如文本旁白或指定用户所需设计的NL命令)自动合成数据视频组件。然而,此前的研究忽略了叙事内容与特定设计创作命令的集成,导致生成结果缺乏定制或难以无缝融入叙事上下文。为此,我们引入了一种新型数据视频创作范式,通过称为标注旁白的统一格式无缝集成用户的创作意图和叙事意图,允许用户在旁白文本中嵌入NL设计命令。基于对用户对标注旁白偏好的形式化研究,我们开发了一个名为Data Playwright的原型系统,体现了这种范式,以有效创建数据视频。数据剧本中,用户可以基于上传的可视化效果撰写标注旁白。系统的解释器自动理解用户的输入,并受益于大型语言模型,合成具有旁白-动画相互作用的数据视频。最终,用户可以预览并微调视频。用户研究表明,借助Data Playwright,用户能够通过毫不费力地通过标注旁白表达其期望结果来创建数据视频。
引用
@article{arxiv.2410.03093,
title = {Data Playwright: Authoring Data Videos with Annotated Narration},
author = {Leixian Shen and Haotian Li and Yun Wang and Tianqi Luo and Yuyu Luo and Huamin Qu},
journal= {arXiv preprint arXiv:2410.03093},
year = {2024}
}
备注
11 pages, 7 figures, accepted by IEEE TVCG