Hadoop平台下的海量数据存储技术研究
| 摘要 | 第1-5页 |
| ABSTRACT | 第5-6页 |
| 创新点摘要 | 第6-10页 |
| 第一章 绪论 | 第10-14页 |
| ·研究背景 | 第10页 |
| ·研究现状 | 第10-11页 |
| ·Hadoop 研究现状 | 第10-11页 |
| ·中小互联网企业图片储存现状分析 | 第11页 |
| ·本文要解决的问题 | 第11-12页 |
| ·在 Hadoop 方面的研究工作 | 第11-12页 |
| ·本系统给企业解决的问题 | 第12页 |
| ·研究内容 | 第12-13页 |
| ·论文组织结构 | 第13页 |
| ·本章小结 | 第13-14页 |
| 第二章 Hadoop 的工作原理 | 第14-19页 |
| ·HDFS 分布式文件系统 | 第14-17页 |
| ·数据的组织 | 第14-16页 |
| ·数据流 | 第16-17页 |
| ·MapReduce 计算框架 | 第17-18页 |
| ·本章小结 | 第18-19页 |
| 第三章 基于 Hadoop 的图片存储系统设计 | 第19-26页 |
| ·需求分析 | 第19-21页 |
| ·中小互联网企业图片存储的具体要求 | 第19页 |
| ·系统设计目标 | 第19页 |
| ·功能分析 | 第19-21页 |
| ·系统总体设计 | 第21-22页 |
| ·系统功能设计 | 第21页 |
| ·系统架构设计 | 第21-22页 |
| ·系统存储的目录结构 | 第22页 |
| ·数据库设计 | 第22-24页 |
| ·UML 类图 | 第24-25页 |
| ·访问数据库的 UML 图 | 第24-25页 |
| ·对 HDFS 操作的 UML 图 | 第25页 |
| ·本章小结 | 第25-26页 |
| 第四章 系统主要功能的实现 | 第26-43页 |
| ·Hadoop 集群环境的配置 | 第26页 |
| ·硬件环境 | 第26页 |
| ·集群环境说明 | 第26页 |
| ·系统关键技术说明 | 第26-28页 |
| ·Hadoop 相关部分 | 第26-27页 |
| ·JSP 技术 | 第27页 |
| ·数据库技术 | 第27页 |
| ·监控软件 | 第27页 |
| ·开发工具 | 第27-28页 |
| ·登录功能的实现 | 第28页 |
| ·普通用户模块的实现 | 第28-31页 |
| ·图片分类功能的实现 | 第28-29页 |
| ·图片上传功能的实现 | 第29-30页 |
| ·图片浏览 | 第30-31页 |
| ·图片删除功能的实现 | 第31页 |
| ·管理员模块的实现 | 第31-35页 |
| ·管理用户功能的实现 | 第31-32页 |
| ·图片管理模块的实现 | 第32-33页 |
| ·统计功能实现 | 第33-35页 |
| ·客户端模块的实现 | 第35-36页 |
| ·文件状态变化的监控 | 第35页 |
| ·基本功能的实现 | 第35-36页 |
| ·日志模块的实现 | 第36-41页 |
| ·日志的格式 | 第36页 |
| ·生成日志数据 | 第36-37页 |
| ·日志的分析的过程 | 第37-40页 |
| ·结果的统计和说明 | 第40-41页 |
| ·监控模块的实现 | 第41-42页 |
| ·ganglia 软件的安装、配置和运行 | 第41页 |
| ·ganglia 监控示例 | 第41-42页 |
| ·本章小结 | 第42-43页 |
| 第五章 系统性能测试与容量扩展 | 第43-48页 |
| ·存储性能测试 | 第43-45页 |
| ·用户文件夹的批量生成 | 第43页 |
| ·测试数据的生成及上传 | 第43页 |
| ·上传性能分析 | 第43-44页 |
| ·下载性能分析 | 第44页 |
| ·删除性能分析 | 第44-45页 |
| ·数据块正确性验证 | 第45-46页 |
| ·使用的命令 | 第45页 |
| ·校验结果示例 | 第45-46页 |
| ·系统容量扩展的讨论 | 第46-47页 |
| ·DataNode 节点的增加 | 第46页 |
| ·提高 NameNode 的使用效率 | 第46-47页 |
| ·本章小结 | 第47-48页 |
| 结论 | 第48-49页 |
| 参考文献 | 第49-53页 |
| 致谢 | 第53-54页 |
| 学位论文摘要 | 第54-68页 |
