基于Hadoop的纪检监察大数据云存储系统设计与实现

目录

声明

第1章 绪 论

1.1 研究背景与意义

1.1.1 研究背景

1.2.2 研究意义

1.2 研究现状

1.2.1 国外研究现状

1.2.2 国内研究现状

1.3 本文主要工作内容和创新

1.3.1 研究内容

1.3.2 创新点

1.4 本文组织结构

第2章 系统开发关键技术

2.1 云存储

2.2 Hadoop 概述

2.2.1 Hadoop特点

2.2.2 分布式编程模型MapReduce

2.2.3 资源管理器YARN

2.3 HDFS概述

2.3.1 HDFS特点

2.3.2 HDFS 整体架构

2.4 HBase 分布式数据库

2.4.1 HBase特点

2.4.2 HBase系统架构

2.5 本章小结

第3章 系统需求分析

3.1 系统可行性分析

3.2 系统业务分析

3.3 系统功能需求分析

3.2.1 数据管理功能

3.3.2 OLAP关联分析功能

3.3.3 系统管理功能

5.3.3 非结构化数据分析

3.3.4 小文件存储优化功能

3.4 系统的非功能需求分析

3.5 本章小结

第4章 系统设计

4.1 系统建设定位和原则

4.2 系统架构设计

4.2.1 总体架构设计

4.2.2 系统技术架构

4.2.3 系统人机交互框架

4.2.4 系统总体功能设计

4.3 OLAP 分析功能设计

4.4 小文件存储优化设计

4.4.1 现有问题总结

4.4.2 现有解决方案分析

4.4.3 优化方案

4.5 系统数据库设计

4.6 本章小结

第5章 系统实现

5.1 登录功能实现

5.2 数据管理功能实现

5.3 OLAP关联分析功能实现

5.3.1 模型管理

5.3.2 Tomcat 日志分析

5.4 系统管理功能实现

5.5 小文件存储优化功能实现

5.5.1 小文件定义

5.5.2 小文件处理

5.5.3 小文件存储优化测试结果及分析

5.6 本章小结

第6章 系统测试与分析

6.1 系统测试概述

6.2 功能测试

6.3 性能测试

6.4 测试结果分析

6.5 本章小结

结论

参考文献

致谢