DynoStore：面向异构存储环境的数据宽域分布系统
分布式、并行与集群计算
2025-07-02 v1
摘要
跨不同设施的数据分布可提升资源利用率，通过复制提高韧性，同时通过就近处理数据源提升性能。然而，由于异构访问协议、差异化身份验证模型以及缺乏统一协调框架，管理此类数据颇具挑战。本文介绍DynoStore——一个跨异构存储系统进行数据管理的系统。DynoStore的核心是数据容器，一种为数据管理提供标准化接口的抽象，确保无论底层存储系统如何，数据管理均可无缝进行。多个数据容器连接形成连贯的宽域存储网络，通过 erasure coding 策略确保韧性。此外，负载均衡算法确保存储资源的公平高效利用。我们采用基准测试和真实案例研究评估了DynoStore，包括在地理分布环境中管理医疗数据和卫星数据。结果表明，DynoStore在中心化云托管系统中实现约10%的性能提升，同时与Redis和IPFS等最新解决方案保持具竞争力的性能。DynoStore还展现出卓越的容错能力，能够抵御更多的故障。
关键词
引用
@article{arxiv.2507.00576,
title = {DynoStore: A wide-area distribution system for the management of data over heterogeneous storage},
author = {Dante D. Sanchez-Gallegos and J. L. Gonzalez-Compean and Maxime Gonthier and Valerie Hayot-Sasson and J. Gregory Pauloski and Haochen Pan and Kyle Chard and Jesus Carretero and Ian Foster},
journal= {arXiv preprint arXiv:2507.00576},
year = {2025}
}
备注
10 pages. Conference: The 25th IEEE International Symposium on Cluster, Cloud, and Internet Computing