中文

从数据到故事:面向基于大语言模型的多智能体系统的自动动画数据视频生成

人机交互 2024-08-08 v1

摘要

从原始数据创建数据故事具有挑战性,原因在于人类注意力持续时间有限以及需要专业技能。近期大语言模型(LLM)的进步为开发具有自主智能体的系统以简化数据叙事工作流提供了巨大机会。尽管多智能体系统具有通过为各智能体分解任务来充分实现LLM潜力的优势,但设计此类系统也面临任务分解、子任务性能优化和工作流设计方面的挑战。为更好地理解这些问题,我们开发了Data Director,一个基于LLM的多智能体系统,旨在自动化动画数据视频的创建——数据故事的一种代表性类型。Data Director解释原始数据、分解任务、设计智能体角色以自动做出明智决策,并无缝集成数据视频的多样化组件。一个案例研究展示了Data Director在生成数据视频方面的有效性。在整个开发过程中,我们从应对挑战中总结了经验教训,指导自主智能体在数据叙事方面的进一步发展。我们还阐明了全局优化、人机交互设计和先进多模态LLM应用的未来方向。

关键词

引用

@article{arxiv.2408.03876,
  title  = {From Data to Story: Towards Automatic Animated Data Video Creation with LLM-based Multi-Agent Systems},
  author = {Leixian Shen and Haotian Li and Yun Wang and Huamin Qu},
  journal= {arXiv preprint arXiv:2408.03876},
  year   = {2024}
}

备注

6 pages, 2 figures, IEEE VIS 2024 Gen4DS Workshop