源代码预训练模型的实证比较
软件工程
2023-02-09 v1
摘要
尽管近年来大量源代码预训练模型已被成功开发并应用于各类软件工程(SE)任务,但我们对这些预训练模型的理解可以说相当有限。为增进对其的理解,我们对 19 个近期开发的源代码预训练模型在 13 个 SE 任务上进行了首次系统性实证比较。为获得对这些模型的额外洞察,我们采用了近期提出的预训练模型四维分类法,并进而考察不同类别的预训练模型与其在不同 SE 任务上性能之间是否存在相关性。
引用
@article{arxiv.2302.04026,
title = {An Empirical Comparison of Pre-Trained Models of Source Code},
author = {Changan Niu and Chuanyi Li and Vincent Ng and Dongxiao Chen and Jidong Ge and Bin Luo},
journal= {arXiv preprint arXiv:2302.04026},
year = {2023}
}
备注
ICSE 2023