代码混合文本中达罗毗荼语言情感分析评测结果
计算与语言
2021-11-19 v1
摘要
我们展示了在 FIRE 2021 上举办的 Dravidian-CodeMix 共享任务的结果,该任务为代码混合文本中达罗毗荼语言情感分析赛道。我们描述了任务、其组织方式以及所提交的系统。该共享任务是去年在 FIRE 2020 上举办的 Dravidian-CodeMix 共享任务的延续。今年的任务包含了词内和词间的代码混合。此外,除泰米尔语和马来亚拉姆语外,还引入了卡纳达语。我们收到了 22 个泰米尔语-英语系统、15 个马来亚拉姆语-英语系统以及 15 个卡纳达语-英语系统。泰米尔语-英语、马来亚拉姆语-英语和卡纳达语-英语的顶尖系统分别取得了 0.711、0.804 和 0.630 的加权平均 F1 分数。总之,投稿的质量与数量表明,代码混合场景下的达罗毗荼语言研究受到广泛关注,且该领域的当前最优水平仍有待进一步提升。
引用
@article{arxiv.2111.09811,
title = {Findings of the Sentiment Analysis of Dravidian Languages in Code-Mixed Text},
author = {Bharathi Raja Chakravarthi and Ruba Priyadharshini and Sajeetha Thavareesan and Dhivya Chinnappa and Durairaj Thenmozhi and Elizabeth Sherly and John P. McCrae and Adeep Hande and Rahul Ponnusamy and Shubhanker Banerjee and Charangan Vasantharajan},
journal= {arXiv preprint arXiv:2111.09811},
year = {2021}
}