通过配置专用网络链路管理数据密集型应用的云网络成本
网络与互联网体系结构
2021-07-21 v1 分布式、并行与集群计算
摘要
许多科学高通量应用可受益于云资源的弹性特性，尤其在需要缩短完成时间时。成本考量通常是此类工作的主要议题，其中网络往往占重要部分；对于数据密集型应用，出口网络成本可能超过计算成本。专用网络链路提供了一种降低网络成本的途径，但确实增加了复杂性。本文中，我们描述了一个 100 fp32 PFLOPS 的云突发以支持 IceCube 生产计算，其使用 Internet2 Cloud Connect 服务从三大云提供商（即 Amazon Web Services、Microsoft Azure 与 Google Cloud Platform）配置若干逻辑专用网络链路，合计提供约 100 Gbps 至本地存储的出口能力。文中给出了关于配置过程、此类部署的收益与局限以及所产生成本分析的技术细节。
引用
@article{arxiv.2104.06913,
title = {Managing Cloud networking costs for data-intensive applications by provisioning dedicated network links},
author = {Igor Sfiligoi and Michael Hare and David Schultz and Frank Würthwein and Benedikt Riedel and Tom Hutton and Steve Barnet and Vladimir Brik},
journal= {arXiv preprint arXiv:2104.06913},
year = {2021}
}
备注
8 pages, 7 figures, 4 tables, to be published in proceedings of PEARC21