基于分布式的任务优先级调度方法和系统及存储介质

摘要

本发明提供了一种基于分布式的任务优先级调度方法和系统，依据先来先服务规则，通过第一公式，确定任务的初始优先级；通过任务的时效性要求，将任务分为即时类任务、非即时类任务两种任务类型；对即时类任务，采用第二公式计算任务优先级，得到第一综合优先级；对非即时类任务，采用第三公式计算任务优先级，得到第二综合优先级；对即时类任务，采用分布式任务资源管理调度框架Yarn进行调度；对非即时类任务，采用分布式任务流调度框架Oozie调度。采用动态优先级算法与分布式任务调度框架结合，减少任务的额定等待时间，提高任务优先级的优先级计算时间，提高任务调度的性能和用户体验感。