ChatGPT 作为科学写作中交通公平性信息的来源
信息检索
2023-03-21 v1 计算与语言
摘要
交通公平性是一项需要交通与社会双重输入的跨学科议题。传统上,交通公平性信息来源于公共图书馆、会议、电视、社交媒体等。包括 ChatGPT 等先进语言模型在内的人工智能(AI)工具正成为受欢迎的信息来源。然而,其可信度尚未得到充分探究。本研究探究了 ChatGPT 生成的与交通公平性相关的内容与有用性。其利用通过 Web of Science(WoS)知识库检索的 152 篇论文。为 ChatGPT 设计的提示要求给定论文标题后提供摘要。随后使用统计工具与无监督文本挖掘将 ChatGPT 生成的摘要与人类书写的摘要进行比较。结果表明 ChatGPT 与人类书写摘要之间相似性较弱。平均而言,人类书写摘要与 ChatGPT 生成摘要约 58% 相似,最大与最小值分别为 97% 与 1.4%。相似性得分高于均值的论文摘要关键词更可能相似,而低于均值的则较不可能相似。高相似性主题包括可达性、公共交通与政策等。此外,观察到高与低相似性得分摘要的聚类关键模式存在明显差异。相反,共现关键词的结果无定论。研究结果表明 ChatGPT 有潜力作为交通公平性信息来源。然而,目前用户在利用 ChatGPT 材料前仍需极大关注。
引用
@article{arxiv.2303.11158,
title = {ChatGPT as the Transportation Equity Information Source for Scientific Writing},
author = {Boniphace Kutela and Shoujia Li and Subasish Das and Jinli Liu},
journal= {arXiv preprint arXiv:2303.11158},
year = {2023}
}