探索 Transformer 在情感识别中的应用:BERT、DistillBERT、RoBERTa、XLNet 与 ELECTRA 的比较
计算与语言
2021-04-06 v1
摘要
本文研究了自然语言理解(NLU)如何应用于情感识别这一情感计算中的特定任务。我们使用一个细粒度情感数据集对不同的 Transformer 语言模型(BERT、DistilBERT、RoBERTa、XLNet 和 ELECTRA)进行微调,并从性能(f1-score)与完成时间两方面对它们进行评估。
引用
@article{arxiv.2104.02041,
title = {Exploring Transformers in Emotion Recognition: a comparison of BERT, DistillBERT, RoBERTa, XLNet and ELECTRA},
author = {Diogo Cortiz},
journal= {arXiv preprint arXiv:2104.02041},
year = {2021}
}