摘要 | 第5-6页 |
Abstract | 第6页 |
第1章 绪论 | 第13-17页 |
1.1 研究背景与意义 | 第13-14页 |
1.2 国内外研究现状 | 第14-16页 |
1.3 文章结构安排 | 第16页 |
1.4 本文的创新点 | 第16-17页 |
第2章 相关技术概述 | 第17-24页 |
2.1 Hadoop云计算平台概述 | 第17-19页 |
2.1.1 Hadoop | 第17页 |
2.1.2 Hadoop主要构造模块 | 第17-19页 |
2.2 HDFS文件管理原理 | 第19-21页 |
2.2.1 HDFS的通信协议 | 第19页 |
2.2.2 HDFS读的机制 | 第19-20页 |
2.2.3 HDFS写的机制 | 第20-21页 |
2.3 hadoop中Map/Reduce的基本原理 | 第21页 |
2.4 索引技术相关知识 | 第21-23页 |
2.4.1 Lucene技术简介 | 第21-22页 |
2.4.2 Lucene基本框架 | 第22页 |
2.4.3 Lucene索引机制 | 第22-23页 |
2.5 本章小结 | 第23-24页 |
第3章 基于HDFS的文件存储管理子系统设计和实现 | 第24-39页 |
3.1 存储管理子系统总体架构分析与设计 | 第24-27页 |
3.1.1 系统概述 | 第24-25页 |
3.1.2 HDFS搭建架构 | 第25-26页 |
3.1.3 HDFS存储过程设计 | 第26页 |
3.1.4 数据存储策略 | 第26-27页 |
3.2 系统关键模块的设计和实现 | 第27-35页 |
3.2.1 注册登录模块的设计和实现 | 第27-28页 |
3.2.2 文件上传设计与实现 | 第28-30页 |
3.2.3 文件下载设计与实现 | 第30-31页 |
3.2.4 文件删除和共享模块的设计与实现 | 第31-33页 |
3.2.5 文件查询模块的设计与实现 | 第33-35页 |
3.3 小文件存储优化设计 | 第35-37页 |
3.4 数据库设计 | 第37-38页 |
3.5 本章小结 | 第38-39页 |
第4章 基于云存储的海量文件检索系统设计和实现 | 第39-47页 |
4.1 基于云存储海量文件检索子系统的架构设计和实现 | 第39-40页 |
4.1.1 系统概述 | 第39-40页 |
4.2 系统关键模块的设计 | 第40-41页 |
4.2.1 爬行器模块的设计 | 第40-41页 |
4.2.2 索引器模块的设计 | 第41页 |
4.2.3 查询器模块的设计 | 第41页 |
4.3 系统关键模块的实现 | 第41-46页 |
4.3.1 爬行器模块的实现 | 第41-44页 |
4.3.2 索引器模块的实现 | 第44-46页 |
4.3.3 查询器模块的实现 | 第46页 |
4.4 本章小结 | 第46-47页 |
第5章 云存储管理系统实现与测试 | 第47-61页 |
5.1 云存储管理系统环境搭建 | 第47-50页 |
5.1.1 Hadoop集群搭建 | 第47-49页 |
5.1.2 开发环境搭建 | 第49-50页 |
5.2 系统主要模块的原型系统 | 第50-53页 |
5.2.1 用户注册和登录模块 | 第50-51页 |
5.2.2 文件的上传下载模块 | 第51-52页 |
5.2.3 文件的删除模块 | 第52-53页 |
5.2.4 文件的查询搜索模块 | 第53页 |
5.3 HDFS系统测试 | 第53-57页 |
5.3.1 副本分布测试 | 第54-55页 |
5.3.2 小文件测试 | 第55-57页 |
5.4 云存储海量文件检索系统的测试 | 第57-60页 |
5.4.1 开发环境搭建 | 第57-58页 |
5.4.2 相关操作 | 第58页 |
5.4.3 云存储检索系统的测试分析 | 第58-60页 |
5.5 本章小结 | 第60-61页 |
结论 | 第61-63页 |
参考文献 | 第63-66页 |
致谢 | 第66-67页 |
附录A 攻读硕士期间参与的项目列表 | 第67-68页 |
附录B 攻读硕士学位期间申请的专利著作 | 第68页 |