呼吁建立基准科学与工程
分布式、并行与集群计算
2022-04-12 v3
摘要
目前，多学科之间缺乏一致的基准测试，甚至此前无人尝试将多学科中不同类别的基准相关联。本文考察了 benchmark 一词的起源与演变。总结了五类基准，包括测量标准、具定义属性的标准化数据集、代表性工作负载、代表性数据集和最佳实践，它们广泛存在于多学科中。我认为该学科发展面临两个紧迫挑战：建立跨学科的一致基准测试，以及开发用于衡量基准本身的元基准。我提议建立基准科学与工程；其主要目标之一是建立跨学科的标准基准层次结构。现在是创办一本多学科基准、标准与评估期刊 TBench 的恰当时机，以交流基准科学与工程的最新技术与最佳实践的进展。
引用
@article{arxiv.2112.09514,
title = {Call for establishing benchmark science and engineering},
author = {Jianfeng Zhan},
journal= {arXiv preprint arXiv:2112.09514},
year = {2022}
}