DXRAM的容错机制遇上高速I/O设备
分布式、并行与集群计算
2018-07-17 v2
摘要
内存键值存储对所有对象提供一致低延迟访问,这对社交媒体网络或在线图分析等交互式大规模应用十分重要,也开辟了新应用领域。但当数据存储在数千台服务器的RAM中时,必须考虑服务器故障。仅有少数内存键值存储提供故障服务器的自动在线恢复,其中最知名的系统是RAMCloud。另一个具有复杂容错机制的系统是专为小数据对象优化的DXRAM。在本报告中,我们详述了基于日志的远程复制过程,研究了这些日志重组的选择策略,并评估了DXRAM中顺序、随机、zipf与冷热分布下的重组性能。这也是首次用高速I/O设备(具体为56 GBit/s InfiniBand互联与PCI-e SSD)评估DXRAM的备份系统。此外,我们讨论了用于降低数据丢失概率的copyset副本分布,以及针对DXRAM对原方法的适配。
引用
@article{arxiv.1807.03562,
title = {DXRAM's Fault-Tolerance Mechanisms Meet High Speed I/O Devices},
author = {Kevin Beineke and Stefan Nothaas and Michael Schoettner},
journal= {arXiv preprint arXiv:1807.03562},
year = {2018}
}
备注
21 pages, 20 figures