系综运行分位数传输中的大规模计算
统计理论
2019-05-13 v1 统计理论
摘要
分位数计算的经典方法要求在排序前获得完整样本。在数值模拟模型的不确定性量化中，这种方法在百亿亿次级（exascale）下并不适用，因为大规模模拟运行系综需要收集数量大得 prohibitively 的数据。该问题借助基于 Robbins-Monro 算法的在线流式与迭代方法得以解决。该方法依赖于 Melissa——一个避免文件、自适应、容错且弹性的框架。在一个产生 11 TB 数据、由 600 万单元网格上的 3000 次流体动力学并行模拟组成的验证案例中，它实现了百分位数时空图的在线计算。
引用
@article{arxiv.1905.04180,
title = {Large scale in transit computation of quantiles for ensemble runs},
author = {Alejandro Ribes and Théophile Terraz and Bertrand Iooss and Yvan Fournier and Bruno Raffin},
journal= {arXiv preprint arXiv:1905.04180},
year = {2019}
}