中文

孟加拉语问答系统:基于BERT-Bangla的封闭域微调

计算与语言 2024-10-08 v1

摘要

针对孟加拉语问答系统的开发目前受限,尤其是在特定领域应用方面。基于自然语言处理的进步,本文探索了微调 BERT-Bangla 模型以填补这一空白。本文提出了使用在封闭域中微调的 BERT-Bangla 模型开发孟加拉语问答系统的方法。数据来源于 Khulna University of Engineering & Technology (KUET) 的网站及其他相关文本。系统使用 2500 个问答对进行训练和评估。采用 Exact Match (EM) 分数和 F1 分数等关键指标进行评估,分别达到 55.26% 和 74.21%。结果表明,特定领域的孟加拉语问答系统具有前景。需进一步优化以提高复杂查询的性能。

关键词

引用

@article{arxiv.2410.03923,
  title  = {Question-Answering System for Bangla: Fine-tuning BERT-Bangla for a Closed Domain},
  author = {Subal Chandra Roy and Md Motaleb Hossen Manik},
  journal= {arXiv preprint arXiv:2410.03923},
  year   = {2024}
}