基于SDN的Hadoop数据中心网DECMP方法

摘要

提出一种基于软件定义网络(software defined network,SDN)的Hadoop数据中心网动态等价成本多路径路由(dynamic equal-cost multipath routing,DECMP)方法.所提方法由3个模块组成:链路监控模块、Hadoop监视器引擎模块、基于软件定义网络DECMP的调度和路由模块.在DECMP调度和路由模块中提出多路径Dijkstra路径查找算法以提供具有相同最小权重的多个路径.然后,DECMP调度和路由模块根据网络资源需求以及数量和大小,来获得数据中心网络中每个流的有效带宽利用率,为Hadoop Map Reduce shuffle阶段动态分配有效路径,提高数据中心网络路由性能.实验结果表示,与其他现有方法比较,本文DECMP方法在链路利用率和吞吐量方面都有所提升.