一种非结构化云数据管理系统的动态布局方法

摘要

本发明涉及大数据管理领域，公开了一种非结构化云数据管理系统的动态布局方法，以降低非结构化数据管理系统中由于数据频繁移动导致的数据传输开销，本发明的方法包括确定客户端提交的任务所需的数据集，采用Master节点中的元数据管理器对数据集进行分区，得到第一数据分区集；建立第一数据分区集中每个数据分区的云模型，根据云模型将第一数据分区集中的所有数据分区划分为稳定数据分区组和不稳定数据分区组；采用数据布局算法将不稳定数据分区组中的各数据分区调入Slave存储节点。