摘要 | 第1-7页 |
Abstract | 第7-14页 |
第一章 绪论 | 第14-28页 |
第一节 研究背景及意义 | 第14-21页 |
·数据处理需求的发展 | 第14-15页 |
·数据处理方式概述 | 第15-17页 |
·MapReduce | 第17-19页 |
·集群MapReduce环境中的调度问题 | 第19-21页 |
第二节 发展现状与研究动机 | 第21-23页 |
·MapReduce任务调度的理论分析 | 第21-22页 |
·连续多个MapReduce作业的调度问题 | 第22页 |
·Map阶段数据传输开销的优化问题 | 第22页 |
·Reduce任务调度中的负载均衡问题 | 第22-23页 |
第三节 论文的主要工作内容 | 第23-26页 |
·论文的研究内容 | 第23-25页 |
·论文的组织结构 | 第25-26页 |
第四节 本章小结 | 第26-28页 |
第二章 MapReduce及其调度问题概述 | 第28-48页 |
第一节 MapReduce编程模型 | 第28-30页 |
第二节 集群MapReduce环境中的调度 | 第30-35页 |
·MapReduce集群的结构 | 第30-31页 |
·基本的调度思想 | 第31-33页 |
·集群MapReduce环境中的基本调度机制 | 第33-35页 |
第三节 一个MapReduce作业的调度与执行 | 第35-38页 |
·匹配MapReduce的文件系统 | 第35-36页 |
·MapReduce作业的执行流程 | 第36-38页 |
第四节 MapReduce调度相关问题的研究现状 | 第38-46页 |
·典型项目及其调度器 | 第38-41页 |
·MapReduce的相关研究 | 第41-45页 |
·研究现状的分析与总结 | 第45-46页 |
第五节 本章小结 | 第46-48页 |
第三章 基于可划分任务理论的MapReduce任务调度研究 | 第48-75页 |
第一节 存在问题及研究路线 | 第48-51页 |
第二节 MapReduce任务的可划分性分析 | 第51-54页 |
·可划分任务理论 | 第51-52页 |
·可划分的MapReduce任务 | 第52-54页 |
第三节 多源节点的相互独立通信模型 | 第54-56页 |
第四节 基于可划分任务理论的MapReduce模型 | 第56-61页 |
第五节 最小化执行时间的任务调度 | 第61-66页 |
·Map阶段的调度方案 | 第61-64页 |
·Reduce阶段的调度方案 | 第64-66页 |
第六节 MapReduce性能分析与评价 | 第66-74页 |
·Map阶段的测试及分析 | 第67-71页 |
·Reduce阶段的测试及分析 | 第71-74页 |
第七节 本章小结 | 第74-75页 |
第四章 连续多个MapReduce作业的调度问题研究 | 第75-98页 |
第一节 引言 | 第75-77页 |
第二节 连续多个MapReduce作业的调度问题 | 第77-79页 |
第三节 MapReduce作业的计算过程分析 | 第79-82页 |
·Map任务的计算时间 | 第81-82页 |
·Reduce任务的计算时间 | 第82页 |
第四节 优化平均作业计算时间的调度方案求解 | 第82-91页 |
·节点不重复使用的调度方案 | 第84-88页 |
·节点重复使用的调度方案 | 第88-91页 |
第五节 中值调度算法与性能测试 | 第91-96页 |
·中值调度算法描述 | 第91-92页 |
·性能测试与分析 | 第92-96页 |
第六节 本章小结 | 第96-98页 |
第五章 优化map阶段数据传输问题的研究 | 第98-121页 |
第一节 引言 | 第98-100页 |
第二节 Map阶段数据传输问题分析 | 第100-102页 |
第三节 Map阶段数据传输问题的研究现状 | 第102-103页 |
第四节 慈善调度算法 | 第103-112页 |
·基本思想 | 第104-105页 |
·慈善调度算法描述 | 第105-108页 |
·性能测试及分析 | 第108-112页 |
第五节 数据预取机制 | 第112-119页 |
·基本思想 | 第112-113页 |
·数据预取机制的改进与分析 | 第113-116页 |
·性能测试及分析 | 第116-119页 |
第六节 本章小结 | 第119-121页 |
第六章 Reduce任务调度中负载均衡问题的研究 | 第121-139页 |
第一节 引言 | 第121-123页 |
第二节 Reduce任务调度中负载均衡问题的分析 | 第123-124页 |
第三节 Reduce阶段的节点通信能力模型 | 第124-127页 |
第四节 基于负载均衡的reduce任务调度算法 | 第127-130页 |
·基本思想 | 第128-129页 |
·算法描述 | 第129-130页 |
第五节 性能测试及分析 | 第130-137页 |
第六节 本章小节 | 第137-139页 |
第七章 总结与展望 | 第139-143页 |
第一节 工作内容总结 | 第139-140页 |
第二节 主要的创新点 | 第140-141页 |
第三节 未来研究方向 | 第141-143页 |
参考文献 | 第143-153页 |
致谢 | 第153-154页 |
个人简历 在学期间发表的学术论文与研究成果 | 第154页 |