中文

SanskritShala:一个用于教学和标注目的的神经梵语自然语言处理工具包,带有基于网络的界面

计算与语言 2023-05-30 v2

摘要

我们提出了一个名为 SanskritShala(一所梵语学校)的神经梵语自然语言处理(NLP)工具包,以促进对诸如词分割、形态标注、依存句法分析和复合类型识别等多项任务的计算语言学分析。我们的系统目前在所有任务的可用基准数据集上均报告了最先进的性能。SanskritShala 被部署为一个基于网络的应用程序,允许用户对给定输入进行实时分析。它内置了易于使用的交互式数据标注功能,允许标注者在系统预测出错时进行纠正。我们公开发布了该工具包中包含的 4 个模块的源代码、7 个在公开可用的梵语语料库上训练的词嵌入模型,以及多个用于评估词嵌入内在属性的标注数据集,如词相似度、相关度、分类、类比预测。据我们所知,这是第一个基于神经网络的、拥有基于网络界面和多个 NLP 模块的梵语 NLP 工具包。我们相信,愿意从事梵语相关工作的人会发现它在教学和标注方面很有用。SanskritShala 可在以下网址获取:https://cnerg.iitkgp.ac.in/sanskritshala。我们平台的演示视频可在以下网址访问:https://youtu.be/x0X31Y9k0mw4。

关键词

引用

@article{arxiv.2302.09527,
  title  = {SanskritShala: A Neural Sanskrit NLP Toolkit with Web-Based Interface for Pedagogical and Annotation Purposes},
  author = {Jivnesh Sandhan and Anshul Agarwal and Laxmidhar Behera and Tushar Sandhan and Pawan Goyal},
  journal= {arXiv preprint arXiv:2302.09527},
  year   = {2023}
}

备注

7 pages, Accepted at ACL23 (Demo track) to be held at Toronto, Canada