GPT-4 是否可帮助检测停烟意图？一种自动数据标注方法的探索
计算与语言
2024-07-02 v1 人工智能
新兴技术
人机交互
社会与信息网络
摘要
近年来，美国迎来了大量电子烟使用的潮流，导致 2019 年 EVALI 爆发期间出现大量因电子烟和吸烟相关肺损伤（EVALI）而导致住院和死亡的病例，凸显了理解吸烟行为并制定有效戒烟策略的紧迫性。鉴于社交媒体平台的普遍存在，全球超过 47 亿用户通过它们进行连接、沟通、获取新闻和娱乐，其中相当一部分讨论与健康相关，使社交媒体数据成为公共卫生研究的宝贵有机数据资源。本研究从一个烟草子社区的 Reddit 上提取样本数据集，以分析用户的停烟意图。借助 OpenAI 最新的大型语言模型 GPT-4进行句子级别的停烟意图检测，本研究将该模型的结果与普通人和临床专家的标注结果进行比较。我们采用零-shot、one-shot、few-shot 和 chain-of-thought 等不同提示策略，开发了 8 个不同细节水平的提示来向 GPT-4 解释任务，并评估了各策略之间的性能。这些初步发现强调了 GPT-4 在社交媒体数据分析中的潜力，尤其是在识别可能令人错过的人类意图方面。
引用
@article{arxiv.2407.00167,
title = {Can GPT-4 Help Detect Quit Vaping Intentions? An Exploration of Automatic Data Annotation Approach},
author = {Sai Krishna Revanth Vuruma and Dezhi Wu and Saborny Sen Gupta and Lucas Aust and Valerie Lookingbill and Wyatt Bellamy and Yang Ren and Erin Kasson and Li-Shiun Chen and Patricia Cavazos-Rehg and Dian Hu and Ming Huang},
journal= {arXiv preprint arXiv:2407.00167},
year = {2024}
}
备注
Accepted for the AI Applications in Public Health and Social Services workshop at the 22nd International Conference on Artificial Intelligence in Medicine (AIME 2024)