调配Yarn计算资源的方法、装置、计算机设备及存储介质

摘要

本发明公开了调配Yarn计算资源的方法、装置、计算机设备及存储介质。该方法包括定时获取数据汇聚列队提交的当前任务个数和数据调度列队提交的当前任务个数，计算出当前负载因子；根据数据汇聚列队和数据调度列队中的任务优先级，设定对应的当前优先级因子；根据当前负载因子和当前优先级因子，更新数据汇聚列队和数据调度列队的当前Yarn计算资源配比。本发明提出了负载因子和优先级因子的概念，在满足调度器原则的前提下，按本方法可以计算出不同队列的自适应分配的最大占比，具有更合理的分配资源的优点。