基于服务发现和容器技术的大数据平台弹性伸缩方法

摘要

本发明公开了一种基于服务发现和容器技术的大数据平台弹性伸缩方法，包括以下步骤：(1)使用容器技术组件化大数据平台；(2)启动大数据集群，注册集群元数据信息；(3)向服务代理汇报心跳数据并更新相关信息；(4)代理服务周期向服务代理读取大数据集群管理信息，判断是否存在节点失效或者需求变更情况，如果存在，则执行第五步骤；否则，执行第六步骤；(5)若存在节点失效情况，则尝试恢复失效的节点容器；若存在需求变更情况，则根据需求变更元数据，为集群添加或则删除节点容器；(6)重复执行以上第三至第五步骤，直至集群服务终止运行。本发明能够感知大数据平台内部状态从而进行有效弹性伸缩和提高集群资源使用率。