中文

GPTEval:关于ChatGPT与GPT-4评估的综述

人工智能 2024-12-25 v2 计算与语言

摘要

ChatGPT的出现引发了媒体对其扰乱社会与经济系统潜力的诸多猜测。其惊人的语言能力激起了学者对其在不同领域表现的强烈好奇。已有许多研究评估了ChatGPT和GPT-4在不同任务与学科中的能力。然而,缺乏总结这些集体评估发现的综合性综述。本综述旨在深入分析先前对ChatGPT和GPT-4的评估,聚焦于其语言与推理能力、科学知识及伦理考量。此外,对现有评估方法进行了考察,并为未来大语言模型评估研究提供了若干建议。

关键词

引用

@article{arxiv.2308.12488,
  title  = {GPTEval: A Survey on Assessments of ChatGPT and GPT-4},
  author = {Rui Mao and Guanyi Chen and Xulang Zhang and Frank Guerin and Erik Cambria},
  journal= {arXiv preprint arXiv:2308.12488},
  year   = {2024}
}