Quranic Conversations:利用阿拉伯语 NLP 技术为《古兰经》开发语义搜索工具
计算与语言
2023-11-10 v1
摘要
《古兰经》被认为是安拉(Allah)向先知穆罕默德(愿主福安之)在约 23 年间逐步启示的直传言语。它是一部安拉提供如何过正直公正生活的指引的经典,强调诚实、怜悯、施舍与公正等原则,并为个人行为、家庭事务、商业伦理等提供规则。然而,由于语言与《古兰经》编排所限,穆斯林难以获取与某一关切事项或所询问题相关的所有经文(ayahs)。为此,我们开发了一个《古兰经》语义搜索工具,用以查找与用户查询或提示相关的经文。为此,我们在超过 30 部 tafsir(经注)的大型数据集上训练了若干模型,通常每部 tafsir 对应《古兰经》中一节经文,并利用余弦相似度获得与所关注提示张量最相似的 tafsir 张量,进而用于检索《古兰经》中对应经文。使用 SNxLM 模型,我们获得了高达 0.97 的余弦相似度分数,对应于某涉及财务经文之 abdu 经注。
引用
@article{arxiv.2311.05120,
title = {Quranic Conversations: Developing a Semantic Search tool for the Quran using Arabic NLP Techniques},
author = {Yasser Shohoud and Maged Shoman and Sarah Abdelazim},
journal= {arXiv preprint arXiv:2311.05120},
year = {2023}
}