基于高性能网络架构的数据计算方法

摘要

本发明提供了一种基于高性能网络架构的数据计算方法，该方法包括：利用MapReduce对小文本文件进行分类；基于上述分类将多个小文件合并成大文件。本发明提出了一种基于高性能网络架构的数据计算方法，基于改进的分布式处理架构将来自不同异构源的多种小文件进行统一规范组织，便于高效存储、分析与检索。