改进构念效度威胁的报告

背景：构念效度涉及使用指标来度量一个不可直接度量的概念。目的：本研究旨在识别、分类、评估和量化经验软件工程文献中关于构念效度威胁的讨论，并利用所得发现提出改进构念效度问题报告的方法。方法：我们分析了 2015 至 2019 年间发表于五本顶级软件工程期刊的 83 篇报告以人为中心实验的文章。基于预定义类别，将各文章中关于构念效度威胁的文本划分为片段（分析单元）。随后评估这些片段是否清晰讨论了某项威胁与一个构念。结果：五分之三的片段关联于与构念效度无关的主题。三分之二的文章在未使用文章所给构念效度定义的情况下讨论了构念效度。威胁在超过五分之四的片段中被清晰描述，但所涉构念仅在三分之二的片段中被清晰描述。当讨论与构念效度无关而涉及其他类型效度时，构念是不清晰的。结论：结果表明在软件工程中改进对构念效度的理解具有潜力。针对所识别薄弱之处给出了建议，以提升对构念效度（CV）的认识与报告水平。