基于RDMA和NVM的大数据系统一致性协议研究

摘要

分布式的存储系统以及计算系统是构造大数据处理系统的基础.系统的高可用性是任何一个分布式系统的基石,高可用技术一般依赖于一致性协议.讨论了经典的非拜占庭的分布式一致性协议以及新技术发展下的RDMA通信协议与NVM存储介质,通过RDMA和NVM的结合获得了更高性能的高可用系统.改进了一致性协议,使其能够更好地利用RDMA与NVM的特性.实现的系统在保证系统数据一致和可用的同时,有效地提高了协议实现的性能.实验表明,相比于现有的系统,实现的系统能够得到40％的性能提高.