基于大语言模型与知识图谱的多模态生态文明模式推荐方法
信息检索
2023-10-31 v1
摘要
生态文明模式推荐系统（ECPRS）旨在为目标区域推荐适宜的生态文明模式，以促进可持续发展并缩小区域差距。然而，当前具有代表性的推荐方法并不适用于地理语境下的生态文明模式推荐。原因有二：其一，区域具有空间异质性，ECPRS需考虑气候、地形、植被等因素，以推荐适应特定生态环境的文明模式，确保推荐的可行性与实用性；其二，现实世界中生态文明模式的抽象特征未被充分利用，导致其嵌入表示丰富度不足，进而使推荐系统性能下降。鉴于上述局限，我们提出ECPR-MML方法。首先，基于新颖的UGPIG方法，我们构建知识图谱以提取蕴含空间异质性特征的区域表示。随后，受大语言模型（LLM）在自然语言处理（NLP）领域取得重大进展的启发，我们采用大LLM以文本与图像形式生成生态文明模式的多模态特征。我们提取并融合这些多模态特征，获得语义丰富的生态文明表示。通过大量实验，我们验证了ECPR-MML模型的性能。结果表明，相较最先进（SOTA）模型，F1@5提升2.11%，较NGCF提升2.02%，较UGPIG提升1.16%。此外，多模态数据确实能提升推荐性能，但LLM生成的数据在某种程度上不如真实数据有效。
引用
@article{arxiv.2310.18951,
title = {A Multimodal Ecological Civilization Pattern Recommendation Method Based on Large Language Models and Knowledge Graph},
author = {Zhihang Yu and Shu Wang and Yunqiang Zhu and Zhiqiang Zou},
journal= {arXiv preprint arXiv:2310.18951},
year = {2023}
}