动态负载均衡

摘要： 分布式星载多RTs(Remote Terminal)系统的任务主要基于功能进行分配,而数据处理任务的突发性往往会使不同计算机之间负载不均衡。运用灵活的负载调度机制,可以有效调节不同计算机间的负载差异,从而在一定程度上提升计算机系统的整体性能。文中提出了一种基于机器学习的分布式星载RTs系统负载调度算法,包含样本采集、任务吞吐率预测模型构建、吞吐率预测和负载调度等4个步骤。在构建任务吞吐率预测模型环节,通过机器学习的线性回归正规方程获取模型权重,缩短了构建模型消耗的时间。在负载调度环节,若RTs的吞吐率之和大于系统总的负载数据量,则按吞吐率比例给各RTs分配数据,否则只给负载数据量小于自身吞吐率的RTs分配一定量的数据。在多台星载计算机电性能产品构建的地面模拟系统上的实验结果表明,该算法可以使系统所有节点的平均CPU利用率提高23.78%,节点间的CPU利用率方差降低至34.59%,同时目标任务的系统总吞吐量显著提升225.97%。也就是说,该方法在确保系统负载均衡性的同时,可有效提高系统的资源利用率,提升星载计算机系统的数据实时处理性能。

摘要： 图是描述实体间关系的重要数据结构,被广泛地应用于信息科学、物理学、生物学、环境生态学等重要的科学领域.现如今,随着图数据规模的不断增大,利用分布式系统来处理大图数据已经成为主流,出现了形如Pregel、GraphX、Power Graph和Gemini等经典的分布式大图数据处理系统.然而,与当前先进的基于单机的图处理系统相比,这些经典的分布式图处理系统在处理真实的图数据时并没有充足或稳定的性能优势.分析了几个有代表性的分布式图处理系统,总结并归纳出了影响其性能的主要挑战.通过对这些挑战的深入研究,提出了RGraph——一个基于RDMA的高效分布式大图数据处理系统.RGraph旨在通过充分利用RDMA的优势来提升图处理系统多个方面的性能.在图划分方面,RGraph采用基于块的划分方式避免破坏原始图数据的局部性,从而保证顶点的高效访问.在负载方面,RGraph提出了基于RDMA单边READ的任务迁移机制和线程间细粒度的任务抢夺方式来分别保证计算节点间以及计算节点内线程间的动态负载均衡,确保集群中的所有计算资源能够被充分利用.在通信方面,RGraph通过对IB verbs的有效封装,实现了符合图计算语义的多线程RDMA通信模型.相比于传统的MPI,RGraph的通信机制可以减少计算节点间2.1倍以上的通信延迟.最后,利用5个真实大图数据集和1个合成数据集,在拥有8个计算节点的高性能集群上测试了RGraph.实验结果表明,RGraph具有明显的性能优势.相比于Powergraph,RGraph具有10.1-16.8倍的加速比,与当前最先进的分布式图处理系统相比,RGraph的加速比仍能达到2.89-5.12倍.同时,RGraph在极度偏斜的幂律图上也能保证稳定的性能优势.

摘要： 面向数据的体系架构(DOA)为海量异构数据流通共享提供了新的有效解决方案。而数据注册中心(DRC)作为DOA的核心部件,它的访问性能尤为关键。针对高并发访问带来的DRC集群服务过载问题,采用Nginx反向代理负载均衡技术处理高并发访问。对Nginx的负载策略进行分析优化,提出一种由动态配置、负载收集、算法调度组成的动态负载均衡策略,并在负载调度模块对Nginx加权最小连接调度算法(WLC)进行改进,通过自适应权值不断调度下一个周期内性能最优的节点来处理请求。通过高并发性能测试验证了所提出的负载均衡策略在DRC集群中能更有效处理大流量的访问需求,提高集群的资源利用率和缩短请求响应时间。

摘要： 针对传统负载均衡算法不能满足公网数字集群系统高并发用户请求和快速呼叫建立等需求,提出一种基于负载反馈的分布式数字集群动态负载均衡算法,实现公网数字集群系统负载均衡,提高用户容量。首先建立参与MCPTT服务器的静态负载和动态负载监控机制和指标;然后利用加权轮询算法为用户分配参与MCPTT服务器,并通过用户请求的处理获得复合负载参数;根据负载指标的反馈更新参与MCPTT服务器权值以动态调整服务器负载。仿真结果表明,该算法的负载均衡效果优于传统算法和其他动态反馈算法,负载均衡度更小、用户请求响应延迟更低。

摘要： 互联网的高速发展使得大数据的应用越来越广泛,使得分布式爬虫处于愈来愈重要的地位。目前主流开源爬虫框架在网络通信开销上优化甚少,缺乏一个有效的方案来减少网络开销问题。论文利用对等式架构的爬行器既是任务的消费者又是任务的生产者,提出了任务尽量在本地执行的优化方向。基于双缓冲技术实现的大粒度任务动态负载均衡策略,能有效地降低通信频次,基于高速缓存原理的URL判重方案,以“空间换时间”的方式,有效地提升爬虫URL判重性能。实验结果表明,该策略具有良好的扩展性、鲁棒性,能使分布式系统的性能优势得到更为充分的发挥。

摘要： 针对集团用户市场业务的发展,采用DTMB技术,实现了集团用户高清数字电视的传输.提出基于动态负载均衡的数字电视系统优化算法,从连接方式、恢复模式、性能分配等3个方面,克服了集团用户业务中断、流量不均、恢复时间长等的缺点.

摘要： 集中化,合并任务的处理是分布式设计中的一个难点。由于不同任务中需要频繁的数据交换,且需对不同任务的结果进行合并,使其难以使用目前主流的分布式设计模型。分布式管道设计模式是一种高度解耦合的分布式设计模型,适合处理业务粒度较大,数据交换频发,IO瓶颈较高的任务。文章在分布式管道设计模式的基础上,参考服务发现机制实现了一个高性能的管道服务框架。

摘要： 为实现更加智能化的节能设计,提出一种新的舰船主干网络动态负载均衡方法与节能机制.对舰船主干网络系统进行能耗建模.在建模中将舰船主干网络系统网络拓扑直接模拟为一种有向图,不对休眠控制器与其相关链路进行考虑,仅对休眠交换机相关配置端口进行考虑.根据构建的能耗模型,设计一种分配算法,对服务器任务进行合理分配.设计一个由多个组件构成的舰船主干网络节能机制,具体包括决策组件、预测组件等组件.参照舰船主干网络的通信协议标准部署实验仿真场景,对设计方法进行仿真验证.验证结果表明设计方法能够实现动态负载均衡,对于用户流量的承受能力与可调节性都较强;端口休眠比例整体较高,最高可达95.9％,休眠比例波动幅度较小,以及能耗整体较低,达到了很好的节能效果,说明设计方法达到了设计目标.

摘要： 集中化,合并任务的处理是分布式设计中的一个难点.由于不同任务中需要频繁的数据交换,且需对不同任务的结果进行合并,使其难以使用目前主流的分布式设计模型.分布式管道设计模式是一种高度解耦合的分布式设计模型,适合处理业务粒度较大,数据交换频发,IO瓶颈较高的任务.文章在分布式管道设计模式的基础上,参考服务发现机制实现了一个高性能的管道服务框架.

摘要： 本文介绍了一种Linux集群动态负载均衡方案,该方案可以根据各节点所处网络环境与实时负载给每个节点计算一个权重,并根据权重给节点分配任务.本文分析了原有的WLC调度算法,指出其不足之处,然后提出了一套较完整的负载计算和权重计算的机制,最后给出了一种能够动态修改节点权重的负载均衡实施方案,改进了原有的WLC调度算法.

摘要： 在论述负载均衡技术在入侵检测系统中应用的相关工作基础上,本文提出一种基于TSDB技术的动态负载均衡模型.TSDB技术实现了将属于同一会话的数据包分配到同一规则匹配引擎,同时避免了由于一次性大量迁移造成的二次过载现象.在高速网络环境下更好地保证了较为均衡的负载状况,从而提高了入侵检测系统的匹配性能.

摘要： MMORPG已经成为世界流行的娱乐方式,越来越多的玩家使得MMORPG的服务器必须采用分布式结构.而在分布式结构中服务器的负载均衡是一个重要问题.本文分析了MMORPG的特点并且提出了一种新的负载均衡方法,这种方法可以有效降低负载迁移的开销.

摘要： 为了解决现有集群管理复杂性问题,文中提出一种新型的集群管理自治框架。该系统具有自我成型、自我愈合、自我保护、自我优化的特点。结合曙光DCAS系统,实现了一个自我优化的实例,Autonomic Feedback动态负载均衡系统,测试表明,达到了管理员手动调整的最佳水平。

摘要： 集群的动态负载均衡是网络计算的关键技术,如何提高动态负载均衡的性能,一直是网络计算人员研究的一个热点.本文研究的EJB容器集群负载均衡问题,其目的就是在互联网用户数和网络流量成几何级数增长的情况,J2EE应用服务器仍然能提供高可用性、高扩展性的服务.

摘要： 高性能集群具有大规模、廉价,高性能的特点,在提供给用户高性能的计算能力的同时,也给管理员对集群的管理带来了复杂性.目前集群管理系统还停留在管理员察看数据和事件并做出判断的阶段,给高性能集群的使用造成了庞大的管理开销.为了自动化管理员的操作,降低集群管理的复杂性,本文在分析大规模集群的自治需求的基础上,提出一种新型的集群自治框架, 提供整体化自治管理方案.通过使用中间件技术提供了良好的可扩展性和安全性,通过UI提供了异步更新和良好的可交互性,使得集群管理系统具有整体化的自我成型、自我愈合、自我保护、自我优化的属性.结合曙光DCAS系统,在动态负载均衡系统上实现,取得了良好的效果.

摘要： 当计算机信息系统在遭受诸如火灾、水灾等自然灾难或人为破坏时,计算机系统的硬件、数据、系统和服务都会受到不同程度的破坏.当灾难发生在通信、金融或军事系统,如果不能够及时应付灾难,恢复系统功能,将造成不可估计的损失.灾备(DisasterRecovery)系统,简称DR系统,也称为灾难恢复系统,就是通过特定的容灾机制,能够在各种灾难损害发生后,仍然能够最大限度地保障提供正常应用服务的计算机信息系统.灾备系统的负载均衡算法设计与系统的体系结构和应用需求紧密相关,仅就灾备系统而言,根据对灾难恢复时间的要求不同,灾备系统就有七种灾备设计方案.因此研究灾备系统的体系结构,紧密结合应用需求,设计有效的负载均衡和容灾算法,将是今后研究的任务.

摘要： 针对微服务架构注册发现、负载均衡、可靠性保障和访问控制等问题,提出了一种分层的微服务框架.该框架自下而上分为数据层、基础层、服务层、业务层和表示层5个层次.在框架的实现过程中,通过采用开源分布式服务框架Spring Cloud,实现了基于Eureka的注册发现,基于服务实时变化的动态负载均衡,基于Hystrix的服务可靠性保障以及基于OAuth2的访问控制.最后基于该框架搭建了“北京大学校园移动信息服务平台”.目前,该平台响应迅速,运行稳定,总关注人数已达到33000余人,日访问量2000余次.

摘要： 提出的迁移技术解决了迁移组件的状态获取,迁移部分与系统其余部分通讯链路的保留以及并发迁移的处理等问题.为了有效地进行透明的负载均衡,实现的迁移机制只用到较少的系统拓扑知识,而且只有迁移部分本身在移动时被要求停止计算.

摘要： 提出的迁移技术解决了迁移组件的状态获取,迁移部分与系统其余部分通讯链路的保留以及并发迁移的处理等问题.为了有效地进行透明的负载均衡,实现的迁移机制只用到较少的系统拓扑知识,而且只有迁移部分本身在移动时被要求停止计算.

摘要： 本发明公开了一种云环境弹性负载均衡方法，包括以下步骤：在云平台部署负载均衡动态配置插件，动态伸缩判断步骤，云平台根据既定的弹性伸缩判断条件，判断当前应用系统是否进行弹性水平扩展或者弹性水平收缩，并相应执行弹性水平扩展或者弹性水平收缩步骤。本发明的负载均衡方法，使用负载均衡动态配置插件将应用系统对负载均衡的需求与云环境弹性伸缩对负载均衡的需求以及负载均衡功能的实现完成了松耦合，因此具有更佳的适应性和灵活。

摘要： 本发明公开了一种负载均衡方法，包括以下步骤：S20、根据客户端发送的连接请求信息，查找出客户端对应的目标服务器；S30、判断目标服务器的负载参考值是否小于第一预设阈值；S40、当负载参考值小于第一预设阈值时，则将客户端的连接请求信息分配给目标服务器；S50、当负载参考值大于等于第一预设阈值时，则进一步判断负载参考值是否小于第二预设阈值；S60、负载参考值小于第二预设阈值时，则将客户端的连接请求信息分配给服务器状态表中当前负载参考值最低的备选服务器。本发明中当目标服务器的负载太多时，将连接请求信息分配给备选服务器；在基本保证一个IP总是能分配给同一台服务器的前提下，使得服务器的负载更加均衡。

摘要： 本发明公开了一种云环境弹性负载均衡方法，包括以下步骤：在云平台部署负载均衡动态配置插件，动态伸缩判断步骤，云平台根据既定的弹性伸缩判断条件，判断当前应用系统是否进行弹性水平扩展或者弹性水平收缩，并相应执行弹性水平扩展或者弹性水平收缩步骤。本发明的负载均衡方法，使用负载均衡动态配置插件将应用系统对负载均衡的需求与云环境弹性伸缩对负载均衡的需求以及负载均衡功能的实现完成了松耦合，因此具有更佳的适应性和灵活。

摘要： 本申请公开了一种负载均衡方法，包括：获取各个应用服务器节点的应用服务器信息，其中，应用服务器信息包括CPU使用率、内存使用率、web应用请求时间、磁盘IO利用率；将应用服务器信息作为输入量，输入最小二乘支持向量机算法模型，输出各个应用服务器节点的负载均衡权重；基于负载均衡权重分配工作任务至对应的应用服务器节点。可见，本申请通过利用应用服务器信息与最小二乘支持向量机算法模型得到负载均衡权重，能够动态的获取符合当前应用服务器节点的负载均衡权重，合理分配各应用服务器工作任务，提高用户请求的响应的速度。本申请同时还提供了一种负载均衡装置和负载均衡服务器，均具有上述有益效果。

摘要： 本发明公开了一种负载均衡方法，包括以下步骤：S20、根据客户端发送的连接请求信息，查找出客户端对应的目标服务器；S30、判断目标服务器的负载参考值是否小于第一预设阈值；S40、当负载参考值小于第一预设阈值时，则将客户端的连接请求信息分配给目标服务器；S50、当负载参考值大于等于第一预设阈值时，则进一步判断负载参考值是否小于第二预设阈值；S60、负载参考值小于第二预设阈值时，则将客户端的连接请求信息分配给服务器状态表中当前负载参考值最低的备选服务器。本发明中当目标服务器的负载太多时，将连接请求信息分配给备选服务器；在基本保证一个IP总是能分配给同一台服务器的前提下，使得服务器的负载更加均衡。

摘要： 本公开提供了一种负载均衡方法，可以应用于云计算技术领域。该方法包括：获取来自目标客户端设备的连接请求，其中，连接请求中携带有地址信息；基于地址信息，从多条安全组规则中确定第一目标安全组规则；在第一目标安全组规则中配置的安全策略为接受的情况下，从服务端设备集群中确定目标服务端设备；以及将连接请求发送至目标服务端设备。此外，本公开还提供了一种负载均衡装置、一种电子设备和一种可读存储介质。

摘要： 本申请公开了一种负载均衡器及其实现方法、负载均衡的方法、网关系统，所述负载均衡器的实现方法，包括：代理控制器AgentController向目标主机上的负载均衡网关代理发送包括创建配置信息的创建请求；目标主机指代多个主机中的任意一台；负载均衡网关代理根据创建配置信息创建代理容器envoycontainer，以及生成并挂载代理容器envoycontainer的配置文件，并利用容器引擎Docker的网络启动代理容器envoycontainer；代理容器envoycontainer基于配置文件中的配置服务XDSserver的地址，拉取最新的目标服务配置，用于对应用程序的请求进行负载均衡。

摘要： 本发明的实施例公开一种面向流媒体传输的负载均衡系统及负载均衡方法，涉及流媒体传输技术领域。所述方法，包括：根据视频监控平台上各服务组件的负载采集到的视频质量，确定各服务组件的各负载的配置情况；其中，所述视频质量至少包括视频数据量，视频帧数，视频的每一帧图像中的行像素点个数、列像素点个数；根据确定出的各服务组件的各负载的配置情况，控制各服务组件面向流媒体传输时的调度量，以实现负载均衡。本发明能够根据视频监控平台上各服务组件的负载采集到的视频质量，合理的调度服务组件，从而提高了负载均衡效果。

摘要： 本申请提出了一种负载均衡方法，所述负载均衡方法包括：根据各成员服务器当前的节点信息，获取所述各成员服务器的权重值，其中，所述节点信息包括各成员服务器当前的服务连接数；根据访问请求对应的负载流量和所述各成员服务器的权重值，将所述访问请求分配给对应的成员服务器。本申请还提供一种负载均衡装置、处理系统及存储介质。本申请的负载均衡方法、负载均衡装置、处理系统及存储介质，能根据当前的节点信息对访问请求进行动态分配，从而提高网络吞吐率。

摘要： 本申请公开了一种负载均衡方法、装置及负载均衡服务器，可应用于大数据领域或金融领域。获取各个分行服务器的交易量，当各个分行服务器中存在交易量满足预设交易量急速上升条件且触发后台服务器交易量到达瓶颈预警的目标分行服务器时，根据所有分行服务器中除目标分行服务器以外的所有剩余分行服务器的总交易量以及目标分行服务器的目标交易量，对各个后台服务器进行功能划分，为目标分行服务器分配专用的多台目标后台服务器，并保证除目标后台服务器以外的剩余后台服务器满足所有剩余分行服务器的总交易量需求。本发明在保证交易量正常的分行服务器正常工作的同时，为交易量急速增加的分行服务器分配专用的后台服务器实现了负载均衡。