中文

使用静态BERT嵌入的仇恨言论检测

计算与语言 2022-01-10 v1 计算机视觉与模式识别

摘要

随着社交媒体平台日益普及,仇恨言论正成为一个主要问题,其表达针对特定群体特征(如性别、宗教或族裔)以传播暴力的辱骂性言论。过去人们习惯于口头发表仇恨言论,而现在随着技术扩张,一些人正蓄意利用社交媒体平台通过发帖、分享、评论等传播仇恨。无论是克赖斯特彻奇清真寺枪击案还是西方针对亚裔的仇恨犯罪,都观察到犯罪者深受线上仇恨文本影响。尽管已有AI系统标记此类文本,但关键挑战之一是降低假阳性率(将非仇恨标记为仇恨),以使这些系统能在不损害表达自由的情况下检测仇恨言论。本文使用ETHOS仇恨言论检测数据集,通过将词嵌入(fastText (FT)、GloVe (GV) 或 FT + GV)替换或结合静态BERT嵌入(BE)来分析仇恨言论检测分类器的性能。大量实验表明,使用静态BE的神经网络性能优于使用FT、GV或FT+GV作为词嵌入。与微调BERT相比,显著改善的一项指标是特异性。

关键词

引用

@article{arxiv.2106.15537,
  title  = {Hate speech detection using static BERT embeddings},
  author = {Gaurav Rajput and Narinder Singh punn and Sanjay Kumar Sonbhadra and Sonali Agarwal},
  journal= {arXiv preprint arXiv:2106.15537},
  year   = {2022}
}