摘要 | 第3-5页 |
Abstract | 第5-6页 |
第一章 绪论 | 第11-16页 |
1.1 云存储技术背景 | 第11-12页 |
1.2 商业云存储应用简介 | 第12-13页 |
1.3 云存储研究热点 | 第13页 |
1.4 本文主要工作 | 第13-14页 |
1.5 论文组织结构 | 第14-16页 |
第二章 相关工作 | 第16-31页 |
2.1 典型开源云存储系统概述 | 第16-17页 |
2.2 Hadoop文件系统(HDFS) | 第17-22页 |
2.2.1 HDFS系统特点 | 第17-18页 |
2.2.2 HDFS系统架构 | 第18-19页 |
2.2.3 名字节点功能 | 第19-20页 |
2.2.4 数据节点功能 | 第20页 |
2.2.5 后备名字节点功能 | 第20页 |
2.2.6 HDFS系统内部交互机制 | 第20-21页 |
2.2.7 HDFS容错和故障处理 | 第21-22页 |
2.3 基于纠删码的分布式容错存储系统 | 第22-28页 |
2.3.1 纠删码原理 | 第22页 |
2.3.2 纠删码的有限域运算模型 | 第22-23页 |
2.3.3 基于纠删码的文件编解码及修复处理 | 第23-26页 |
2.3.4 典型纠删码容错存储系统 | 第26-28页 |
2.4 基于再生码的分布式文件修复 | 第28-30页 |
2.4.1 再生码原理 | 第28-29页 |
2.4.2 基于再生码的文件修复处理 | 第29-30页 |
2.4.3 再生码缺陷 | 第30页 |
2.5 本章小结 | 第30-31页 |
第三章 基于网络编码的云存储系统Cumulus设计 | 第31-50页 |
3.1 设计目标 | 第31-32页 |
3.2 多编码框架 | 第32-34页 |
3.3 写功能流程设计 | 第34-36页 |
3.3.1 原生HDFS写流程 | 第34-35页 |
3.3.2 Cumulus写流程 | 第35-36页 |
3.4 读功能流程设计 | 第36-37页 |
3.4.1 原生HDFS读流程 | 第36页 |
3.4.2 Cumulus读流程 | 第36-37页 |
3.5 读流程具体实现 | 第37-41页 |
3.6 修复功能设计 | 第41-43页 |
3.7 写、读性能优化设计 | 第43-45页 |
3.7.1 写流程的校验和生成优化 | 第43-44页 |
3.7.2 编码过程并行化 | 第44-45页 |
3.7.3 读流程的数据预取 | 第45页 |
3.8 性能测试 | 第45-49页 |
3.8.1 正常写测试 | 第46-47页 |
3.8.2 正常读测试 | 第47页 |
3.8.3 并发读测试 | 第47-48页 |
3.8.4 并发写测试 | 第48-49页 |
3.9 本章小结 | 第49-50页 |
第四章 分布式存储中的数据去重复可靠性 | 第50-58页 |
4.1 存储去重复技术 | 第50-51页 |
4.2 典型重复检测方法 | 第51-52页 |
4.2.1 全文件检测 | 第51页 |
4.2.2 固定分块检测 | 第51页 |
4.2.3 可变分块检测 | 第51-52页 |
4.2.4 混合技术 | 第52页 |
4.3 去重复对系统的影响 | 第52-53页 |
4.4 MDS编码可靠性指标 | 第53-55页 |
4.4.1 MDS编码可靠性抽象 | 第53-54页 |
4.4.2 去重复后的可靠性 | 第54-55页 |
4.5 丢失严重性 | 第55-57页 |
4.6 本章小结 | 第57-58页 |
第五章 总结与展望 | 第58-59页 |
致谢 | 第59-60页 |
参考文献 | 第60-64页 |
附录 | 第64-66页 |
附录A | 第64页 |
附录B | 第64-66页 |