自定义的可序列化的数据结构、hadoop集群、服务器及其应用方法

摘要

一种自定义的可序列化的数据结构、hadoop集群、服务器及其应用方法，自定义的可序列化的数据结构包括数据内容与标记值类、标志值结构类、数据映射关系类，在数据的前端设置有数据源的标记内容；数据内容与标记值类用于解析数据标记值和数据内容；标记值结构类用于标记内容的读取、识别、写入；数据映射关系类用于储存和加载数据标记内容与不同数据的源的映射关系，以及数据标记内容与对应的Protobuf编译之后的类的映射关系。所述hadoop集群包括自定义的可序列化的数据结构，所述服务器包括hadoop集群。本发明自定义的数据结构既有Protobuf的特性，又有Writable的特性。同时也实现了在Hive中的反序列化接口，可以使其在Hive中的使用比一般的文本数据更加的方便、快捷，减少错误。