发布量子计算机性能结果时如何避免误导大众
量子物理
2024-11-14 v1 新兴技术
摘要
1991 年,David Bailey 撰文描述了夸大大规模并行计算机性能的技巧。该文旨在以幽默方式抗议通过虚高基准测试结果来「误导大众」并促销的做法,引发了程序性标准的制定,帮助基准测试者避免导致无根据和误导性结论的方法论错误。如今量子计算机开始展现出作为经典计算机可行替代品的潜力,我们看到三十年前的错误正被一批不熟悉这段历史和这些标准的新研究者重演。受 Bailey 模型启发,本文为量子性能基准测试的新手提出了四条「如何不做」的建议:(1) 不提运行时间就宣称性能优越;(2) 不提优化所需调优时间就报告优化结果;(3) 为运行在虚构平台上的求解器(或与之比较)宣称更快运行时间;(4) 无理由地挑选有利数据。改进现行做法的建议见最后一节。
引用
@article{arxiv.2411.08860,
title = {How NOT to Fool the Masses When Giving Performance Results for Quantum Computers},
author = {Catherine McGeoch},
journal= {arXiv preprint arXiv:2411.08860},
year = {2024}
}
备注
14 pages; 17 pages including references