大数据下重复数据删除的关键技术研究
摘要 | 第5-6页 |
Abstract | 第6页 |
第1章 绪论 | 第10-16页 |
1.1 研究背景及意义 | 第10页 |
1.2 重复数据删除技术的研究现状 | 第10-14页 |
1.2.1 文件分块技术的研究 | 第10-12页 |
1.2.2 可靠性的研究 | 第12页 |
1.2.3 吞吐量研究 | 第12-14页 |
1.3 本文研究内容 | 第14页 |
1.4 本文组织结构 | 第14-16页 |
第2章 重复数据删除技术的相关研究综述 | 第16-28页 |
2.1 前言 | 第16页 |
2.2 文件分块 | 第16-19页 |
2.3 哈希算法 | 第19-21页 |
2.3.1 MD5算法 | 第21页 |
2.3.2 SHA-1算法 | 第21页 |
2.4 数据块索引结构 | 第21-23页 |
2.4.1 B树 | 第21-22页 |
2.4.2 LSM树 | 第22-23页 |
2.5 性能优化方法 | 第23-24页 |
2.6 文件菜单压缩 | 第24-27页 |
2.7 本章小结 | 第27-28页 |
第3章 基于B树的二级索引方案的设计与分析 | 第28-36页 |
3.1 前言 | 第28页 |
3.2 基于B树的二级索引方案(SIAR) | 第28-31页 |
3.2.1 文件读的过程 | 第29页 |
3.2.2 SIAR结构 | 第29-30页 |
3.2.3 Selector | 第30页 |
3.2.4 B树索引表 | 第30页 |
3.2.5 B树 | 第30-31页 |
3.3 复杂度分析 | 第31-32页 |
3.4 实验与结果 | 第32-35页 |
3.4.1 模拟器 | 第32-33页 |
3.4.2 数据集 | 第33页 |
3.4.3 结果与分析 | 第33-35页 |
3.5 本章小结 | 第35-36页 |
第4章 重复数据删除系统的设计与实现 | 第36-47页 |
4.1 前言 | 第36页 |
4.2 重复数据删除系统系统的设计 | 第36-38页 |
4.2.1 系统设计的目标 | 第36页 |
4.2.2 系统的总体架构 | 第36-38页 |
4.3 重复数据删除系统的实现 | 第38-46页 |
4.3.1 客户端 | 第38-41页 |
4.3.2 服务器端 | 第41-46页 |
4.4 本章小结 | 第46-47页 |
结论 | 第47-49页 |
参考文献 | 第49-52页 |
致谢 | 第52-54页 |
附录A 攻读硕士期间发表的论文目录 | 第54-55页 |
附录B 攻读学位期间参加的科研项目 | 第55页 |