摘要 | 第5-6页 |
Abstract | 第6-7页 |
第1章 绪论 | 第12-22页 |
1.1 研究背景及意义 | 第12-15页 |
1.2 研究现状 | 第15-20页 |
1.2.1 负载均衡研究现状 | 第15-17页 |
1.2.2 节能技术研究现状 | 第17-20页 |
1.3 本文主要工作 | 第20页 |
1.4 本文组织结构 | 第20-22页 |
第2章 Hadoop平台和节能技术概述 | 第22-34页 |
2.1 Hadoop平台概述 | 第23-28页 |
2.1.1 HDFS的工作原理及特点 | 第24-25页 |
2.1.2 MapReduce计算框架的工作原理及特点 | 第25-28页 |
2.2 负载均衡机制 | 第28-30页 |
2.3 分布式系统能耗优化技术 | 第30-32页 |
2.3.1 传统调度方案 | 第30-31页 |
2.3.2 基于DVFS的技术调度方案 | 第31-32页 |
2.4 本章小结 | 第32-34页 |
第3章 MapReduce的负载均衡策略 | 第34-47页 |
3.1 资源分配策略模型 | 第34-39页 |
3.1.1 资源利用率 | 第35页 |
3.1.2 启发式剩余时间估计 | 第35-37页 |
3.1.3 快慢节点判断 | 第37页 |
3.1.4 大任务预判 | 第37-38页 |
3.1.5 大任务的分割 | 第38-39页 |
3.2 负载均衡策略 | 第39-41页 |
3.2.1 任务优先级判定算法 | 第39-40页 |
3.2.2 大任务分割算法 | 第40-41页 |
3.3 实验结果与分析 | 第41-46页 |
3.3.1 不同数据偏斜度下的评估 | 第42-43页 |
3.3.2 Grep实例不同输出百分比下的评估 | 第43-44页 |
3.3.3 不同数据量下的Grep实例评估 | 第44-46页 |
3.4 本章小结 | 第46-47页 |
第4章 基于DVFS技术的节能调度策略 | 第47-60页 |
4.1 能耗模型 | 第47-48页 |
4.2 DVFS技术的优化调度算法 | 第48-52页 |
4.2.1 处理器合并过程 | 第48-50页 |
4.2.2 基于DVFS技术的任务拉伸任务 | 第50-52页 |
4.3 实验结果与分析 | 第52-58页 |
4.3.1 不同处理器数量下的评估 | 第53-55页 |
4.3.2 不同CCR值下的评估 | 第55-58页 |
4.3.3 数据不同并行度下的评估 | 第58页 |
4.4 本章小结 | 第58-60页 |
总结与展望 | 第60-62页 |
参考文献 | 第62-67页 |
致谢 | 第67-68页 |
附录A 攻读学位期间发表论文目录 | 第68-69页 |
附录B 攻读硕士学位期间所参与的科研项目 | 第69页 |