摘要 | 第3-4页 |
Abstract | 第4-5页 |
第1章 引言 | 第9-14页 |
1.1 研究背景 | 第9-10页 |
1.2 课题来源 | 第10页 |
1.3 国内外研究现状 | 第10-12页 |
1.4 本文主要工作 | 第12页 |
1.5 本文组织结构 | 第12-14页 |
第2章 云计算概述 | 第14-20页 |
2.1 定义与背景 | 第14-16页 |
2.1.1 产生背景 | 第14-15页 |
2.1.2 定义 | 第15-16页 |
2.2 体系结构 | 第16页 |
2.3 主要服务模式 | 第16-17页 |
2.4 主要的商业云平台与服务商 | 第17-19页 |
2.5 Hadoop开源云平台 | 第19页 |
2.6 本章小结 | 第19-20页 |
第3章 Hadoop概要 | 第20-28页 |
3.1 HDFS文件系统 | 第20-23页 |
3.2 MapReduce框架 | 第23-25页 |
3.3 主要的调度算法 | 第25-27页 |
3.3.1 先进先出算法 | 第25-26页 |
3.3.2 计算能力调度算法 | 第26-27页 |
3.3.3 公平调度算法 | 第27页 |
3.3.4 近似最长结束时间算法 | 第27页 |
3.4 本章小结 | 第27-28页 |
第4章 大规模Hadoop集群的JT异域备份模型 | 第28-38页 |
4.1 传统Hadoop集群的单点JT模型分析 | 第28-32页 |
4.1.1 传统Hadoop的集群架构 | 第28-29页 |
4.1.2 MapReduce在集群上的调度执行过程 | 第29-30页 |
4.1.3 单点JT模型的失效处理 | 第30-31页 |
4.1.4 大规模集群环境下单点JT模型的缺陷 | 第31-32页 |
4.2 优化的JT异域备份模型 | 第32-37页 |
4.2.1 优化的Hadoop集群架构 | 第32-33页 |
4.2.2 主备JT选举算法 | 第33-34页 |
4.2.3 JT异域备份模型的工作模式 | 第34-36页 |
4.2.4 故障切换过程 | 第36-37页 |
4.3 本章小结 | 第37-38页 |
第5章 基于Hadoop公平调度算法的抢占模型 | 第38-50页 |
5.1 公平调度算法分析 | 第38-43页 |
5.1.1 调度方法 | 第38-40页 |
5.1.2 算法实现 | 第40-43页 |
5.2 公平调度算法现有任务抢占模式及其不足 | 第43-45页 |
5.2.1 现有任务抢占模式 | 第43-44页 |
5.2.2 现有模型存在问题 | 第44-45页 |
5.3 优化的公平调度算法抢占模型 | 第45-49页 |
5.3.1 优化的多因子抢占模型流程 | 第46-47页 |
5.3.2 多因子抢占模型的参数和影响因子 | 第47-49页 |
5.4 本章小结 | 第49-50页 |
第6章 仿真实验分析 | 第50-58页 |
6.1 仿真实验设计 | 第50-53页 |
6.1.1 测试环境 | 第50页 |
6.1.2 测试数据规模及作业类型 | 第50-51页 |
6.1.3 仿真实验评价指标 | 第51-52页 |
6.1.4 系统参数设置 | 第52页 |
6.1.5 差异测试分类 | 第52-53页 |
6.1.6 仿真过程 | 第53页 |
6.2 仿真实验结果与分析 | 第53-57页 |
6.2.1 优先抢占快节点测试 | 第53-55页 |
6.2.2 优先抢占短进程节点测试 | 第55-56页 |
6.2.3 优先抢占数据本地化节点测试 | 第56-57页 |
6.3 本章小结 | 第57-58页 |
第7章 总结与展望 | 第58-60页 |
7.1 总结 | 第58页 |
7.2 展望 | 第58-60页 |
致谢 | 第60-61页 |
参考文献 | 第61-63页 |
攻读学位期间的研究成果 | 第63页 |