主资源公平调度算法在YARN中应用研究

摘要

Apache Hadoop YARN是一种新的通用的Hadoop资源管理器,是在Mapreduce1的基础上发展起来的,该引入为集群在利用率、资源统一管理和数据共享等方面带来了巨大好处。为此,文章在分析了Hadoop YARN计算框架的基本结构和工作流程,重点研究了Hadoop YARN中的多资源分配机制,尤其是主资源公平调度算法(Dominant Resource Fairness,DRF)在YARN中的应用。