现成软件工程专用情感分析工具评估：一项扩展的复制研究
软件工程
2021-04-22 v2
摘要
情感分析方法已广泛用于研究人类交流，包括与软件项目相关的讨论。由于通用情感分析工具不能很好地契合软件开发者所交流的信息，已开发出面向软件工程（SE）的专用新工具。我们研究了 SE 专用情感分析工具在多大程度上缓解了先前研究所强调的软件工程实证研究的结论效度威胁。首先，我们复制了两项研究，分别探讨 GitHub 安全讨论和 Stack Overflow 提问撰写中情感的作用。随后，我们通过评估这些工具彼此之间以及与 600 篇文档黄金标准上人工标注的一致程度，对先前研究进行了扩展。我们发现，不同的 SE 专用情感分析工具在“现成”使用时，可能在细粒度层面导致相互矛盾的结果。相反，可能需要针对特定平台进行调优或重新训练，以考虑平台惯例、行话或文档长度的差异。
引用
@article{arxiv.2010.10172,
title = {Assessment of Off-the-Shelf SE-specific Sentiment Analysis Tools: An Extended Replication Study},
author = {Nicole Novielli and Fabio Calefato and Filippo Lanubile and Alexander Serebrenik},
journal= {arXiv preprint arXiv:2010.10172},
year = {2021}
}
备注
Accepted for publication in Empirical Software Engineering