第一个书签之前
基于Alluxio的数据高可用部署策略的研究与优化
RESEARCH AND OPTIMIZATION OFDATA HIGH AVAILABILITYDEPLOYMENT STRATEGY BASED ONALLUXIO
摘要
Abstract
第1章 绪 论
1.1 课题背景与研究意义
1.2 国内外研究现状
1.3 本文主要研究内容
1.3.1数据块按热度分层存储
1.3.2数据块副本动态调整
1.4 论文组织结构
第2章 Alluxio与副本冗余技术相关介绍
2.1 Alluxio数据管理机制
2.1.1 Alluxio结构
2.1.2 底层存储支持
2.1.3 层次化存储机制
2.1.4 其他管理机制
2.2 副本冗余技术
2.2.1 副本冗余技术概念
2.2.2 数据副本策略分类
2.2.3 副本冗余技术优点
2.2.4 副本冗余技术要点
2.3 本章小结
第3章 基于热点数据的分层存储策略
3.1 分布式存储系统中热点数据分析
3.1.1 热点数据的定义
3.1.2 Zipf定律
3.2 基于热点数据的分层存储设计
3.2.1 频率预测算法设计
3.2.2 数据划分策略设计
3.3 基于热点数据的分层存储实现
3.3.1 周期频率管理模块实现
3.3.2 频率分析模块实现
3.3.3 数据划分模块实现
3.4 实验分析
3.4.1 权重系数对数据块读取频率预测值的影响
3.4.2 与Zipf热点划分的对比
3.4.3 与Alluxio数据分配策略的对比
3.5 本章小结
第4章 数据块副本动态调整策略
4.1 现有的副本个数决策算法
4.2 数据块副本动态调整设计
4.2.1 动态调整阈值设计
4.2.2 动态调整策略设计
4.3 数据块副本动态调整实现
4.3.2 数据副本计算模块实现
4.3.3 故障处理模块实现
4.4 实验分析
4.4.1 多任务中副本数变化分析
4.4.2 存储空间利用分析
4.4.3 数据读取效率对比分析
4.4.4 故障处理分析
4.5 本章小结
结 论
参考文献
攻读硕士学位期间发表的论文及其它成果
哈尔滨工业大学学位论文原创性声明和使用权限
致 谢
哈尔滨工业大学;
