大语言模型在定性分析中的应用与启示:经验软件工程的新前沿
软件工程
2025-03-11 v4
摘要
大语言模型(LLM)在定性分析中的应用正受到各领域的关注,包括软件工程领域,其中定性方法对于理解人类和社会因素至关重要。本研究旨在调查LLM目前在定性分析中的使用方式及其在软件工程研究中的潜在应用,重点关注其使用带来的益处、局限性和相关实践。通过对21项相关研究进行系统映射研究,探讨了LLM用于定性分析的已报告用途。研究结果表明,LLM主要用于编码、主题分析和数据分类等任务,带来了提高效率和辅助新研究者等益处。然而,也发现了输出可变性、捕捉细微观点的挑战以及与隐私和透明度相关的伦理问题等局限性。该研究强调了在软件工程中的定性研究中优化LLM使用需要结构化的策略和指南,在提升其有效性的同时应对伦理考量。尽管LLM在支持定性分析方面展现出前景,但人类专业知识在数据解读中仍然至关重要,持续探索最佳实践对于其成功融入经验软件工程研究将至关重要。
引用
@article{arxiv.2412.06564,
title = {Applications and Implications of Large Language Models in Qualitative Analysis: A New Frontier for Empirical Software Engineering},
author = {Matheus de Morais Leça and Lucas Valença and Reydne Santos and Ronnie de Souza Santos},
journal= {arXiv preprint arXiv:2412.06564},
year = {2025}
}