摘要 | 第5-6页 |
Abstract | 第6-7页 |
第一章 绪论 | 第10-14页 |
1.1 论文研究目的和意义 | 第10-11页 |
1.2 国内外研究现状 | 第11-12页 |
1.3 论文主要贡献 | 第12-13页 |
1.4 论文组织结构 | 第13-14页 |
第二章 云计算、Hadoop与Hadoop调度器 | 第14-30页 |
2.1 云计算简介 | 第14页 |
2.2 Hadoop开源平台简介 | 第14-17页 |
2.2.1 Hadoop文件系统 | 第14-15页 |
2.2.2 Hadoop MapReduce | 第15-17页 |
2.3 Hadoop调度架构和传统调度器 | 第17-29页 |
2.3.1 Hadoop调度架构 | 第17-21页 |
2.3.2 现有的几个调度器及其优缺点 | 第21-29页 |
2.4 本章小结 | 第29-30页 |
第三章 基于作业类型划分的调度算法 | 第30-45页 |
3.1 作业类型划分调度算法中心思想和调度流程 | 第30-34页 |
3.1.1 中心思想 | 第31页 |
3.1.2 调度流程 | 第31-34页 |
3.2 作业类型划分算法 | 第34-38页 |
3.2.1 KNN分类算法 | 第35页 |
3.2.2 基于KNN算法的作业类型划分算法 | 第35-37页 |
3.2.3 对节点分类 | 第37-38页 |
3.3 作业类型划分调度算法实现 | 第38-44页 |
3.3.1 Hadoop编译环境和编译方式 | 第38页 |
3.3.2 作业类型划分调度算法实现相关Hadoop接口介绍 | 第38-41页 |
3.3.3 作业类型划分调度算法采样版本实现 | 第41-42页 |
3.3.4 带有作业类型划分调度算法的Hadoop的实现 | 第42-43页 |
3.3.5 优先级处理方式 | 第43页 |
3.3.6 系统负载均衡的处理 | 第43-44页 |
3.4 本章小结 | 第44-45页 |
第四章 基于代价比较的调度算法 | 第45-56页 |
4.1 代价比较调度算法原理 | 第45-47页 |
4.2 代价比较调度算法调度流程 | 第47-49页 |
4.3 代价比较调度算法实现 | 第49-53页 |
4.3.1 代价比较调度算法实现相关Hadoop接口介绍 | 第50-52页 |
4.3.2 带有代价比较调度算法的Hadoop的实现 | 第52-53页 |
4.4 代价比较与作业类型划分调度算法的融合 | 第53-55页 |
4.5 本章小结 | 第55-56页 |
第五章 作业类型划分和代价比较调度算法测评实验 | 第56-80页 |
5.1 实验环境搭建 | 第56-61页 |
5.1.1 安装虚拟机 | 第56-57页 |
5.1.2 安装和配置hadoop | 第57-60页 |
5.1.3 格式化Hadoop文件系统和启动Hadoop | 第60-61页 |
5.2 Hadoop作业准备 | 第61-62页 |
5.3 作业类型划分调度算法测评实验 | 第62-77页 |
5.3.1 输入数据准备 | 第62-63页 |
5.3.2 样本数据采集 | 第63-65页 |
5.3.3 使用不同调度器运行作业与结果处理 | 第65-73页 |
5.3.4 作业类型划分调度算法与经典调度算法性能对比 | 第73-77页 |
5.4 代价比较算法测评实验 | 第77页 |
5.5 综合算法测评实验 | 第77-79页 |
5.6 本章小结 | 第79-80页 |
结论 | 第80-81页 |
全文总结 | 第80页 |
进一步工作 | 第80-81页 |
参考文献 | 第81-84页 |
致谢 | 第84-85页 |
附件 | 第85页 |