基于云存储的企业集成系统数据的处理与研究

摘要

随着信息化时代的来临，煤矿企业正在运用发达的高新技术提高自身的经济收益，因此，企业内部传统的管理系统将不再适合其发展。结合煤矿企业自身的实际情况，提出在保留原有管理系统的基础上，在一个大型的平台上建立集成系统，将企业内部各个分散、独立的管理系统整合成一个有机整体。集成系统的建立既方便了企业内不同部门之间的用户交流，也便于企业对外沟通，提高企业的整体经济效益。
　　集成系统的产生实际意义上解决了企业内部数据不流通的弊端，但同时也带来新的问题:集成后海量数据的存储问题。本文以企业集成系统产生的海量数据为研究依据，打破传统的数据处理方式，选用一套当今网络世界比较先进的大数据处理方式——云存储。
　　本文通过对大数据的分析，以及对云存储和Hadoop基础知识的介绍，根据煤矿企业集成系统中海量数据的独有特点，选用Hadoop技术搭建一个大型的企业云存储平台。结合HBase是面向列式数据库的特点，选用其为大量数据的管理系统，建立数据库，利用RowKey当索引，从中查询数据;选用HDFS作为文件的分布式存储系统，通过HDFS中的NameNode和DataNode相互配合，完成数据之间的存取。当用户从客户端Client上传数据，交由Hadoop架构中的HBase和HDFS技术进行处理，再存储至云端，从而使大量的数据有序的存储。本文最后对企业集成系统云存储安全性的分析，通过加密算法以及备份系统来完善云安全，让用户安全放心的将数据放在云存储中。在本文的总结中，提出云存储作为一个新型技术所存在的问题:在以后的发展中云存储可以在安全性以及数据处理方面有更大的发展空间。

目录

声明

摘要

引言

1 绪论

1．1 选题背景与意义

1．2 国内外研究现状

1．3 本文主要内容

2 企业集成系统中的云存储技术

2．1 云计算概述

2．2 云存储介绍

2．3 云存储关键技术

2．4 云存储在企业中的应用

3 企业集成系统中大数据的处理技术

3．1 Hadoop技术

3．1．1 Hadoop的发展

3．1．2 Hadoop技术的原理

3．2 HDFS

3．2．1 HDFS的产生

3．2．2 HDFS的架构与流程

3．3 HBase

3．3．1 大数据环境下的数据库

3．3．2 HBase架构和原理

3．3．3 HBase的模型

3．4 Hadoop架构的大数据在企业中的应用

4 企业集成数据的系统设计

4．1 设计需求分析

4．2 系统架构设计

4．3 HBase的设计

4．4 HDFS的设计

5 企业集成系统的云存储安全分析

5．1 存储安全现状及分析

5．2 云端的安全机制

5．3 云存储的数据安全

5．4 企业集成系统云存储安全性的解决方案

6 总结与展望

6．1 总结

6．2 展望

参考文献

致谢

作者简介及读研期间主要科研成果