摘要 | 第5-7页 |
ABSTRACT | 第7-9页 |
第一章 绪论 | 第13-25页 |
1.1 研究背景及意义 | 第13-14页 |
1.2 国内外研究现状 | 第14-21页 |
1.2.1 Hadoop小文件处理研究现状 | 第14-16页 |
1.2.2 Hadoop负载均衡研究现状 | 第16-17页 |
1.2.3 云存储研究现状 | 第17-19页 |
1.2.4 Hadoop服务计量计费研究现状 | 第19-21页 |
1.3 主要研究内容 | 第21-22页 |
1.4 研究成果及章节安排 | 第22-25页 |
1.4.1 研究成果 | 第22页 |
1.4.2 章节安排 | 第22-25页 |
第二章 Hadoop平台体系基础知识 | 第25-33页 |
2.1 引言 | 第25-26页 |
2.2 Hadoop平台体系结构 | 第26-30页 |
2.2.1 分布式文件系统HDFS | 第26-29页 |
2.2.2 简易编程模型MapReduce | 第29-30页 |
2.3 本章小结 | 第30-33页 |
第三章 基于数据预取的Hadoop小文件解决方案 | 第33-49页 |
3.1 Hadoop小文件导致的问题 | 第33-34页 |
3.2 基于数据预取的Hadoop小文件方案 | 第34-39页 |
3.2.1 定义数据预取类型 | 第35页 |
3.2.2 方案总体架构 | 第35-36页 |
3.2.3 小文件存储模块 | 第36-37页 |
3.2.4 小文件预取模块 | 第37-39页 |
3.3 实验与结果分析 | 第39-47页 |
3.3.1 实验环境 | 第39页 |
3.3.2 小文件存储速度及其硬件资源消耗对比实验 | 第39-42页 |
3.3.3 小文件读取速度及其硬件资源消耗对比实验 | 第42-44页 |
3.3.4 小文件检索时间及其硬件资源消耗对比实验 | 第44-46页 |
3.3.5 实验分析 | 第46-47页 |
3.4 本章小结 | 第47-49页 |
第四章 基于层次分析法的Hadoop负载均衡方案 | 第49-61页 |
4.1 Hadoop负载均衡存在的问题分析 | 第49页 |
4.2 基于层次分析法的Hadoop负载均衡方案 | 第49-54页 |
4.2.1 预定义负载因子 | 第50页 |
4.2.2 计算文件数据块负载 | 第50-51页 |
4.2.3 计算节点总负载 | 第51-52页 |
4.2.4 计算节点相对负载 | 第52-53页 |
4.2.5 负载均衡方案具体实施流程 | 第53-54页 |
4.3 实验与结果分析 | 第54-60页 |
4.3.1 实验环境 | 第54-55页 |
4.3.2 负载波动性及硬件资源消耗对比实验 | 第55-58页 |
4.3.3 负载均衡后访问响应时间对比实验 | 第58页 |
4.3.4 负载均衡后文件读取速度对比实验 | 第58-59页 |
4.3.5 实验分析 | 第59-60页 |
4.4 本章小结 | 第60-61页 |
第五章 基于P2P的Hadoop混合云存储模型 | 第61-75页 |
5.1 当前云存储模型存在的问题分析 | 第61-62页 |
5.2 基于P2P的Hadoop混合云存储模型 | 第62-65页 |
5.2.1 PCS模型总体架构设计 | 第63-64页 |
5.2.2 PCS数据分片设计 | 第64页 |
5.2.3 PCS基本任务管理 | 第64-65页 |
5.2.4 PCS运行过程描述 | 第65页 |
5.3 实验与结果分析 | 第65-73页 |
5.3.1 实验环境 | 第65-66页 |
5.3.2 文件存储速度及其硬件资源消耗对比实验 | 第66-68页 |
5.3.3 文件检索时间及其硬件资源消耗对比实验 | 第68-70页 |
5.3.4 PCS内部P2P与ownCloud对比实验及分析 | 第70-72页 |
5.3.5 PCS模型存储文件的安全性分析 | 第72页 |
5.3.6 实验分析 | 第72-73页 |
5.4 本章小结 | 第73-75页 |
第六章 基于业务逻辑的Hadoop服务计量计费方案 | 第75-89页 |
6.1 当前计费模式存在的问题分析 | 第75-76页 |
6.2 基于业务逻辑的Hadoop服务计量计费方案 | 第76-81页 |
6.2.1 预定义服务分类及有效访问 | 第76-77页 |
6.2.2 Hadoop服务计量方法设计 | 第77-78页 |
6.2.3 Hadoop服务计费方法设计 | 第78-79页 |
6.2.4 服务计量计费具体推导过程 | 第79-81页 |
6.3 方案的实施部署架构 | 第81-82页 |
6.4 计量计费对比示例分析 | 第82-87页 |
6.4.1 预定义服务计量规则 | 第82-83页 |
6.4.2 计量过程及计费结果对比分析 | 第83-86页 |
6.4.3 方案对用户和服务商之间不同影响分析 | 第86-87页 |
6.5 本章小结 | 第87-89页 |
第七章 结束语 | 第89-91页 |
参考文献 | 第91-99页 |
致谢 | 第99-101页 |
博士在读期间完成的论文 | 第101-103页 |
博士在读期间参与完成的项目 | 第103页 |