使用 ChatGPT 进行电子表格公式生成的实验：AI 生成电子表格的风险证据
软件工程
2023-09-04 v1
摘要
大语言模型（LLM）已变得足够成熟，可通过解释纯英文句子来创建复杂的计算机程序，并以 Python、JavaScript、C++ 和电子表格等多种现代语言实现。这些工具功能强大且相对准确，因此无论使用者的背景或知识如何，都能广泛地接触计算机编程。本文提出了一系列使用 ChatGPT 的实验，以探索该工具在 ChatGPT 必须推断、推理并解决问题的情况下生成有效电子表格公式及相关计算输出的能力。结果表明，在某些情况下，ChatGPT 能够凭借正确的推理、演绎和推断生成正确的电子表格公式。然而，当信息有限、不确定或问题过于复杂时，ChatGPT 的准确性及其推理、推断和演绎能力都会崩溃。这还可能导致虚假陈述和“幻觉”，从而破坏电子表格公式的创建过程。
引用
@article{arxiv.2309.00095,
title = {Experimenting with ChatGPT for Spreadsheet Formula Generation: Evidence of Risk in AI Generated Spreadsheets},
author = {Simon Thorne},
journal= {arXiv preprint arXiv:2309.00095},
year = {2023}
}
备注
15 Pages