中文

来自 Mozilla 的性能测量与告警数据集(数据制品)

性能 2025-03-21 v1

摘要

软件系统中的性能回归可能导致重大的财务损失并降低用户满意度,这使得其早期检测与缓解至关重要。尽管尽早捕获性能回归的实践非常重要,但目前缺乏公开可用的数据集来全面捕获真实世界的性能测量、经专家验证的告警以及相关元数据(如缺陷和测试条件)。为了填补这一空白,我们引入了一个独特的数据集,以支持性能工程、异常检测和机器学习领域的各种研究。该数据集收集自 Mozilla Firefox 的性能测试基础设施,包含 5,655 条性能时间序列、17,989 条性能告警,以及 2023 年 5 月至 2024 年 5 月收集的由此产生的缺陷的详细标注。通过发布此数据集,我们为研究人员提供了一项宝贵资源,用于研究性能趋势、开发新颖的变点检测方法,以及推进跨不同平台和测试环境的性能回归分析。该数据集可在 https://doi.org/10.5281/zenodo.14642238 获取

关键词

引用

@article{arxiv.2503.16332,
  title  = {A Dataset of Performance Measurements and Alerts from Mozilla (Data Artifact)},
  author = {Mohamed Bilel Besbes and Diego Elias Costa and Suhaib Mujahid and Gregory Mierzwinski and Marco Castelluccio},
  journal= {arXiv preprint arXiv:2503.16332},
  year   = {2025}
}