基于纠删码的云文件系统设计与优化
摘要 | 第9-10页 |
ABSTRACT | 第10-11页 |
第一章 绪论 | 第12-22页 |
1.1 研究背景 | 第12-15页 |
1.1.1 分布式存储技术的发展 | 第12-14页 |
1.1.2 存储系统失效的原因 | 第14页 |
1.1.3 存储系统的可靠性 | 第14-15页 |
1.2 数据冗余技术 | 第15-19页 |
1.2.1 冗余技术的发展 | 第15-16页 |
1.2.2 冗余技术的现状 | 第16-18页 |
1.2.3 副本冗余技术 | 第18页 |
1.2.4 纠删码冗余技术 | 第18-19页 |
1.3 本文工作 | 第19-20页 |
1.4 论文组织结构 | 第20-22页 |
第二章 相关研究 | 第22-30页 |
2.1 纠删码技术的分类 | 第22-25页 |
2.1.1 阵列纠删码 | 第22-23页 |
2.1.2 RS类纠删码 | 第23-24页 |
2.1.3 LDPC纠删码 | 第24页 |
2.1.4 存储系统中的纠删码研究 | 第24-25页 |
2.2 负载均衡的分类 | 第25-26页 |
2.2.1 静态负载均衡算法 | 第25页 |
2.2.2 动态负载均衡算法 | 第25-26页 |
2.2.3 自适应负载均衡算法 | 第26页 |
2.3 数据放置策略 | 第26-27页 |
2.3.1 启发式放置算法 | 第26-27页 |
2.3.2 随机放置算法 | 第27页 |
2.3.3 爬山放置算法 | 第27页 |
2.4 数据修复策略 | 第27-28页 |
2.4.1 被动式修复 | 第28页 |
2.4.2 主动式修复 | 第28页 |
2.5 本章小结 | 第28-30页 |
第三章 基于纠删码的数据放置与修复算法研究 | 第30-46页 |
3.1 存储节点负载能力评价方法 | 第30-36页 |
3.1.1 负载评价指标的选择 | 第30-31页 |
3.1.2 负载指标获取方法 | 第31页 |
3.1.3 概念定义 | 第31-32页 |
3.1.4 存储节点负载能力的分类 | 第32页 |
3.1.5 基于层次分析法的负载权重建模 | 第32-36页 |
3.2 面向负载均衡的数据放置算法 | 第36-41页 |
3.2.1 数据放置策略分析 | 第36-37页 |
3.2.2 基于纠删码的数据放置算法描述 | 第37-38页 |
3.2.3 基于纠删码的数据放置算法实现 | 第38-41页 |
3.2.4 算法分析 | 第41页 |
3.3 基于拓扑感知的数据修复算法 | 第41-45页 |
3.3.1 数据修复策略分析 | 第42页 |
3.3.2 数据修复算法思想 | 第42-44页 |
3.3.3 数据修复算法分析 | 第44-45页 |
3.4 本章小结 | 第45-46页 |
第四章 基于纠删码的云文件系统设计与实现 | 第46-58页 |
4.1 HDFS-RAID简介 | 第46-49页 |
4.1.1 总体架构 | 第46-47页 |
4.1.2 功能分析 | 第47-49页 |
4.2 基于纠删码云文件系统的设计 | 第49-52页 |
4.2.1 EC-HDFS总体结构 | 第50页 |
4.2.2 负载监测模块 | 第50-51页 |
4.2.3 数据放置模块 | 第51页 |
4.2.4 数据修复模块 | 第51-52页 |
4.3 基于纠删码云文件系统的实现 | 第52-57页 |
4.3.1 EC-HDFS的实现流程 | 第52-53页 |
4.3.2 重要数据结构 | 第53页 |
4.3.3 负载监测模块 | 第53-54页 |
4.3.4 数据放置模块 | 第54-55页 |
4.3.5 数据修复模块 | 第55-57页 |
4.4 本章小结 | 第57-58页 |
第五章 实验测试及分析 | 第58-66页 |
5.1 实验环境搭建 | 第58-61页 |
5.1.1 硬件环境 | 第58-60页 |
5.1.2 软件环境 | 第60-61页 |
5.2 测试方案以及结果分析 | 第61-64页 |
5.2.1 面向负载均衡的数据放置算法性能测试 | 第61-63页 |
5.2.2 基于拓扑感知的数据修复算法性能测试 | 第63-64页 |
5.3 本章小结 | 第64-66页 |
第六章 结束语 | 第66-68页 |
6.1 工作总结 | 第66-67页 |
6.2 未来展望 | 第67-68页 |
致谢 | 第68-70页 |
参考文献 | 第70-74页 |
作者在学期间取得的学术成果 | 第74页 |