mdx II 性能分析：面向跨学科数据科学研究的下一代云平台
分布式、并行与集群计算
2025-02-18 v1
摘要
mdx II 是一个基础设施即服务云平台，旨在加速数据科学研究并促进日本各大学和研究机构之间的跨学科合作。与传统的高性能计算系统不同，mdx II 利用 OpenStack 提供由虚拟机、虚拟网络和高级存储组成的可定制且隔离的计算环境。本文对 mdx II 进行了全面的性能评估，包括与 Amazon Web Services (AWS) 的比较。我们从多个方面评估了 16-vCPU 虚拟机的性能，包括浮点计算性能、内存吞吐量、网络吞吐量、文件系统和对象存储性能以及实际应用性能。与 AWS 的 16-vCPU 实例相比，结果表明 mdx II 在许多方面优于 AWS，并证明 mdx II 在高性能数据分析工作负载方面具有广阔的前景。我们还使用占用整个主机的 224-vCPU 虚拟机评估了虚拟化开销。结果表明，对于计算密集型基准测试，虚拟化开销极小，而内存密集型基准测试则经历了较大的开销。这些发现有望帮助 mdx II 的用户在其数据科学工作负载中获得高性能，并为未来以数据为中心的云平台的设计者提供见解。
引用
@article{arxiv.2502.10820,
title = {Performance analysis of mdx II: A next-generation cloud platform for cross-disciplinary data science research},
author = {Keichi Takahashi and Tomonori Hayami and Yu Mukaizono and Yuki Teramae and Susumu Date},
journal= {arXiv preprint arXiv:2502.10820},
year = {2025}
}
备注
Accepted at The 15th International Conference on Cloud Computing and Services Science (CLOSER 2025)