面向情感分类的波斯语俚语文本转换及社交媒体波斯语短文本深度学习

由于缺乏合适的工具来分析波斯语会话文本，使得对这些文本的各种分析（包括情感分析）变得困难。在本研究中，我们试图通过提供 PSC（Persian Slang Converter，波斯语俚语转换器）这一将会话文本转换为正式文本的工具，并结合最先进、最优的深度学习方法与 PSC，使机器更容易理解这些文本，从而更好地实现机器对波斯语短文本的情感学习。我们使用了来自各种社交网络和电影字幕的超过 1000 万条无标签文本（作为会话文本）以及约 1000 万条新闻文本（作为正式文本）来训练无监督模型并实现工具的正式化。将带有正面、负面和中性标签的 6 万条 Instagram 社交网络用户评论作为监督数据，用于训练短文本情感分类模型。使用该正式化工具，会话语料库中 57% 的词语被成功转换。最后，通过使用该正式化工具、FastText 模型和深度 LSTM 网络，在测试数据上获得了 81.91% 的准确率。