评估现代文本处理工具中的表情符号使用支持
计算与语言
2021-01-05 v1 信息检索
社会与信息网络
摘要
由于其视觉吸引力以及生动传达人类情感的能力等因素，表情符号在数字通信中已变得无处不在。表情符号在社交媒体和其他即时消息中的日益突出也导致对处理含表情符号文本的系统与工具的需求增加。在本研究中，我们通过考虑带有表情符号的推文测试集来评估这种支持，并基于这些测试集开展一系列实验，考察主流 NLP 与文本处理工具充分处理它们的能力。具体而言，我们考察分词、词性标注以及情感分析。我们的结果表明，许多工具在处理含表情符号的文本时仍存在显著缺陷。
引用
@article{arxiv.2101.00430,
title = {Assessing Emoji Use in Modern Text Processing Tools},
author = {Abu Awal Md Shoeb and Gerard de Melo},
journal= {arXiv preprint arXiv:2101.00430},
year = {2021}
}