一种在大数据平台中分发数据的系统及方法

摘要

本发明的在大数据平台中分发数据的系统和方法，采用异步I/O为技术基础构建大数据分发单元进行大数据高速分发，采用服务端和客户端线程分离，提高数据分发的吞吐量，通过多维度结构存储单元保证数据的完全结构化，用大数据管理中心以及数据总线模块保证数据分发的准确性和正确性，使得各个部分配合起来均能高速运转，不会相互等待资源，可以充分利用资源。同时整个系统呈现很好的伸缩性。