什么造就优质回答？定性访谈质量的实证分析

当定性访谈能引出高质量回答时，其为人类体验提供了关键洞察。尽管定性研究和 NLP 研究者提出了多种访谈质量度量，但这些度量缺乏对高分回答实际有助于研究目标的验证。在本工作中，我们识别、实现并评估了 10 种提出的访谈回答质量度量，以确定哪些实际预测了回答对研究结果的贡献。为此，我们引入了定性访谈语料库——一个 newly constructed 数据集，包含来自 14 个真实研究项目的 343 份访谈转录和 16,940 条参与者回答。我们发现，与关键研究问题的直接相关性是回答质量的最强预测因子。此外，我们发现两种常用于评估 NLP 访谈系统的度量——清晰度和基于惊讶度的信息性——并不能预测回答质量。本工作为定性研究的设计和自动化访谈系统的评估提供了分析洞察和可扩展的基于实证的度量。