Patchview：基于 LLM 的生成尘埃和磁铁可视化的世界构建
人机交互
2024-08-09 v1 人工智能
计算与语言
摘要
大型语言模型（LLM）可以帮助作家生成世界元素，如派系、人物和地点。然而，处理大量生成元素可能令人头疼。此外，如果用户希望精确控制难以用语言描述的生成元素，仅靠提示可能不够。我们引入 Patchview，一个可定制的 LLM 驱动系统，通过磁铁和尘埃的物理隐喻帮助用户可视化世界构建，允许用户通过与故事概念和元素交互来进行交互。Patchview 中的元素通过与高相关性概念的距离靠拢来实现可视化，以促进理解。用户还可以通过指示元素在概念之间的期望位置来引导难以用语言描述的生成。当用户不同意 LLM 的可视化和生成时，可以通过重新定位元素来进行纠正。这些纠正可用于对齐 LLM 的未来行为以符合用户的感知。我们通过用户研究表明，Patchview 支持世界元素的理解和生成引导，促进了世界构建过程中的探索。Patchview 提供了关于如何通过可定制的可视化表示来帮助用户实现理解、引导和与生成式 AI 模型行为保持一致性的见解。
引用
@article{arxiv.2408.04112,
title = {Patchview: LLM-Powered Worldbuilding with Generative Dust and Magnet Visualization},
author = {John Joon Young Chung and Max Kreminski},
journal= {arXiv preprint arXiv:2408.04112},
year = {2024}
}
备注
Accepted to UIST2024