大数据下重复数据删除的关键技术研究
| 摘要 | 第5-6页 |
| Abstract | 第6页 |
| 第1章 绪论 | 第10-16页 |
| 1.1 研究背景及意义 | 第10页 |
| 1.2 重复数据删除技术的研究现状 | 第10-14页 |
| 1.2.1 文件分块技术的研究 | 第10-12页 |
| 1.2.2 可靠性的研究 | 第12页 |
| 1.2.3 吞吐量研究 | 第12-14页 |
| 1.3 本文研究内容 | 第14页 |
| 1.4 本文组织结构 | 第14-16页 |
| 第2章 重复数据删除技术的相关研究综述 | 第16-28页 |
| 2.1 前言 | 第16页 |
| 2.2 文件分块 | 第16-19页 |
| 2.3 哈希算法 | 第19-21页 |
| 2.3.1 MD5算法 | 第21页 |
| 2.3.2 SHA-1算法 | 第21页 |
| 2.4 数据块索引结构 | 第21-23页 |
| 2.4.1 B树 | 第21-22页 |
| 2.4.2 LSM树 | 第22-23页 |
| 2.5 性能优化方法 | 第23-24页 |
| 2.6 文件菜单压缩 | 第24-27页 |
| 2.7 本章小结 | 第27-28页 |
| 第3章 基于B树的二级索引方案的设计与分析 | 第28-36页 |
| 3.1 前言 | 第28页 |
| 3.2 基于B树的二级索引方案(SIAR) | 第28-31页 |
| 3.2.1 文件读的过程 | 第29页 |
| 3.2.2 SIAR结构 | 第29-30页 |
| 3.2.3 Selector | 第30页 |
| 3.2.4 B树索引表 | 第30页 |
| 3.2.5 B树 | 第30-31页 |
| 3.3 复杂度分析 | 第31-32页 |
| 3.4 实验与结果 | 第32-35页 |
| 3.4.1 模拟器 | 第32-33页 |
| 3.4.2 数据集 | 第33页 |
| 3.4.3 结果与分析 | 第33-35页 |
| 3.5 本章小结 | 第35-36页 |
| 第4章 重复数据删除系统的设计与实现 | 第36-47页 |
| 4.1 前言 | 第36页 |
| 4.2 重复数据删除系统系统的设计 | 第36-38页 |
| 4.2.1 系统设计的目标 | 第36页 |
| 4.2.2 系统的总体架构 | 第36-38页 |
| 4.3 重复数据删除系统的实现 | 第38-46页 |
| 4.3.1 客户端 | 第38-41页 |
| 4.3.2 服务器端 | 第41-46页 |
| 4.4 本章小结 | 第46-47页 |
| 结论 | 第47-49页 |
| 参考文献 | 第49-52页 |
| 致谢 | 第52-54页 |
| 附录A 攻读硕士期间发表的论文目录 | 第54-55页 |
| 附录B 攻读学位期间参加的科研项目 | 第55页 |