评估Stack Overflow上的隐私问题:ChatGPT能否匹敌?
软件工程
2024-06-13 v1 人工智能
计算与语言
摘要
Stack Overflow及其他类似论坛常被开发者用来寻求软件开发及隐私相关问题的解答。近期,ChatGPT已被用作替代方案,以生成代码或回应开发者的问题。在本文中,我们旨在通过评估Stack Overflow上所提隐私相关问题的类型,来理解开发者的隐私挑战。随后,我们对Stack Overflow用户给出的被采纳回复与ChatGPT针对这些提取问题生成的回复进行 comparative分析,以判断ChatGPT能否作为可行替代。我们的结果显示,大多数隐私相关问题涉及选择/同意、聚合与身份识别。此外,我们的发现表明,ChatGPT对约56%的问题生成了相似正确的回复,而对于其余回复,Stack Overflow的答案略优于ChatGPT。
引用
@article{arxiv.2306.11174,
title = {Evaluating Privacy Questions From Stack Overflow: Can ChatGPT Compete?},
author = {Zack Delile and Sean Radel and Joe Godinez and Garrett Engstrom and Theo Brucker and Kenzie Young and Sepideh Ghanavati},
journal= {arXiv preprint arXiv:2306.11174},
year = {2024}
}
备注
Submitted to the 10th International Workshop on Evolving Security & Privacy Requirements Engineering (ESPRE'23) co-located with the 31st IEEE International Requirements Engineering Conference September 4-8, 2023, Leibniz Universit\"at, Hannover, Germany