Molecumentary：基于分子可视化的可扩展叙事纪录片
人机交互
2024-04-25 v1
摘要
我们提出了一种利用实时科学可视化制作纪录片风格内容的方法。我们制作 molecumentary，即以分子生物学结构模型为特色的分子纪录片。我们采用可扩展的方法，而非僵化的传统制作流程。我们的方法受到交互式科学可视化快速发展的启发，其在科学传播中展现出巨大潜力。然而，若无某种形式的解释或引导，新手与外行往往难以从可视化本身获得洞见。我们利用语言通道整合此类知识，并随引人入胜的视觉呈现一并提供。为实现 molecumentary 的合成，我们针对两个主要制作步骤提供技术解决方案：1) 准备故事结构；2) 将故事转化为具体叙事。第一步中，来自异构来源的模型信息被编译为故事图。局部知识与远程来源相结合，以补全故事图并丰富最终结果。第二步中，利用故事图合成叙事，即按顺序呈现的故事元素。我们提出了一种遍历故事图并生成虚拟漫游的方法，使用自动化的相机与可视化转场。领域专家撰写的文本通过文本转语音功能转化为语言表征，并作为解说提供。利用所述框架，我们合成了带有描述、模仿人工制作纪录片的自动飞掠。此外，我们展示了第二种场景：通过文本输入引导纪录片叙事。
引用
@article{arxiv.2011.02418,
title = {Molecumentary: Scalable Narrated Documentaries Using Molecular Visualization},
author = {David Kouřil and Ondřej Strnad and Peter Mindek and Sarkis Halladjian and Tobias Isenberg and M. Eduard Gröller and Ivan Viola},
journal= {arXiv preprint arXiv:2011.02418},
year = {2024}
}