通过大语言模型在Minecraft中生成3D建筑
人工智能
2024-06-14 v1
摘要
近年来，程序化内容生成在2D游戏关卡生成领域（如《超级马里奥兄弟》和《推箱子》）通过大语言模型(LLMs)取得了显著进展。为了进一步验证LLMs的能力，本文探讨了LLMs如何助力沙盒游戏《Minecraft》中3D建筑的生成。我们提出了一种文本到Minecraft建筑(T2BM)模型，该模型涉及提示词优化、层间表示解码和修复。生成过程支持立面、室内场景以及门等功能性方块。我们进行了实验来评估通过LLMs生成的建筑的完整性和满意度。结果表明，LLMs在3D建筑生成方面具有巨大潜力。在适当的提示词下，LLMs可以在Minecraft中生成结构完整的正确建筑，并融入窗户和床等特定建筑方块，满足人类用户的指定要求。
引用
@article{arxiv.2406.08751,
title = {3D Building Generation in Minecraft via Large Language Models},
author = {Shiying Hu and Zengrong Huang and Chengpeng Hu and Jialin Liu},
journal= {arXiv preprint arXiv:2406.08751},
year = {2024}
}
备注
This paper has been accepted by IEEE Conference on Games