ValiText——面向基于文本的社会构念计算度量的统一验证框架
计算与语言
2024-06-11 v6
摘要
关于如何验证基于文本的社会构念计算度量的指导是零散的。尽管研究者普遍承认验证基于文本的度量的重要性，但他们往往缺乏共享的词汇和统一的框架来这样做。本文介绍 ValiText，一种新验证框架，旨在协助学者在文本数据中有效地度量社会构念。该框架建立在社会科学中效度的概念基础之上，并通过对社会科学验证实践的实证回顾和专家咨询得以强化。最终，ValiText 要求研究者展示三类验证证据：实质证据（概述度量的理论基础）、结构证据（检验文本模型及其输出的性质）和外部证据（检验度量如何与独立信息相关联）。该框架进一步辅以验证步骤检查清单，以文档表形式的实用指导引导研究者完成验证过程。
引用
@article{arxiv.2307.02863,
title = {ValiText -- a unified validation framework for computational text-based measures of social constructs},
author = {Lukas Birkenmaier and Claudia Wagner and Clemens Lechner},
journal= {arXiv preprint arXiv:2307.02863},
year = {2024}
}