用于越南社交媒体文本仇恨言论检测的大规模数据集
计算与语言
2021-07-21 v4
摘要
近年来,越南在 Facebook、Youtube、Instagram 和 Tiktok 等不同社交平台上见证了社交网络用户的大规模发展。在社交媒体上,仇恨言论已成为社交网络用户面临的一个关键问题。为解决这一问题,我们引入了 ViHSD——一个用于自动检测社交网络上仇恨言论的人工标注数据集。该数据集包含超过 30,000 条评论,数据集中每条评论具有三种标签之一:CLEAN、OFFENSIVE 或 HATE。此外,我们介绍了用于标注和评估数据集质量的数据创建过程。最后,我们使用深度学习模型和 transformer 模型对数据集进行了评估。
引用
@article{arxiv.2103.11528,
title = {A Large-scale Dataset for Hate Speech Detection on Vietnamese Social Media Texts},
author = {Son T. Luu and Kiet Van Nguyen and Ngan Luu-Thuy Nguyen},
journal= {arXiv preprint arXiv:2103.11528},
year = {2021}
}
备注
IEA/AIE 2021: Advances and Trends in Artificial Intelligence. Artificial Intelligence Practices, pp 415-426