首页--工业技术论文--自动化技术、计算机技术论文--自动化技术及设备论文--自动化系统论文--数据处理、数据处理系统论文

集群MapReduce环境中任务和作业调度若干关键问题的研究

摘要第1-7页
Abstract第7-14页
第一章 绪论第14-28页
 第一节 研究背景及意义第14-21页
     ·数据处理需求的发展第14-15页
     ·数据处理方式概述第15-17页
     ·MapReduce第17-19页
     ·集群MapReduce环境中的调度问题第19-21页
 第二节 发展现状与研究动机第21-23页
     ·MapReduce任务调度的理论分析第21-22页
     ·连续多个MapReduce作业的调度问题第22页
     ·Map阶段数据传输开销的优化问题第22页
     ·Reduce任务调度中的负载均衡问题第22-23页
 第三节 论文的主要工作内容第23-26页
     ·论文的研究内容第23-25页
     ·论文的组织结构第25-26页
 第四节 本章小结第26-28页
第二章 MapReduce及其调度问题概述第28-48页
 第一节 MapReduce编程模型第28-30页
 第二节 集群MapReduce环境中的调度第30-35页
     ·MapReduce集群的结构第30-31页
     ·基本的调度思想第31-33页
     ·集群MapReduce环境中的基本调度机制第33-35页
 第三节 一个MapReduce作业的调度与执行第35-38页
     ·匹配MapReduce的文件系统第35-36页
     ·MapReduce作业的执行流程第36-38页
 第四节 MapReduce调度相关问题的研究现状第38-46页
     ·典型项目及其调度器第38-41页
     ·MapReduce的相关研究第41-45页
     ·研究现状的分析与总结第45-46页
 第五节 本章小结第46-48页
第三章 基于可划分任务理论的MapReduce任务调度研究第48-75页
 第一节 存在问题及研究路线第48-51页
 第二节 MapReduce任务的可划分性分析第51-54页
     ·可划分任务理论第51-52页
     ·可划分的MapReduce任务第52-54页
 第三节 多源节点的相互独立通信模型第54-56页
 第四节 基于可划分任务理论的MapReduce模型第56-61页
 第五节 最小化执行时间的任务调度第61-66页
     ·Map阶段的调度方案第61-64页
     ·Reduce阶段的调度方案第64-66页
 第六节 MapReduce性能分析与评价第66-74页
     ·Map阶段的测试及分析第67-71页
     ·Reduce阶段的测试及分析第71-74页
 第七节 本章小结第74-75页
第四章 连续多个MapReduce作业的调度问题研究第75-98页
 第一节 引言第75-77页
 第二节 连续多个MapReduce作业的调度问题第77-79页
 第三节 MapReduce作业的计算过程分析第79-82页
     ·Map任务的计算时间第81-82页
     ·Reduce任务的计算时间第82页
 第四节 优化平均作业计算时间的调度方案求解第82-91页
     ·节点不重复使用的调度方案第84-88页
     ·节点重复使用的调度方案第88-91页
 第五节 中值调度算法与性能测试第91-96页
     ·中值调度算法描述第91-92页
     ·性能测试与分析第92-96页
 第六节 本章小结第96-98页
第五章 优化map阶段数据传输问题的研究第98-121页
 第一节 引言第98-100页
 第二节 Map阶段数据传输问题分析第100-102页
 第三节 Map阶段数据传输问题的研究现状第102-103页
 第四节 慈善调度算法第103-112页
     ·基本思想第104-105页
     ·慈善调度算法描述第105-108页
     ·性能测试及分析第108-112页
 第五节 数据预取机制第112-119页
     ·基本思想第112-113页
     ·数据预取机制的改进与分析第113-116页
     ·性能测试及分析第116-119页
 第六节 本章小结第119-121页
第六章 Reduce任务调度中负载均衡问题的研究第121-139页
 第一节 引言第121-123页
 第二节 Reduce任务调度中负载均衡问题的分析第123-124页
 第三节 Reduce阶段的节点通信能力模型第124-127页
 第四节 基于负载均衡的reduce任务调度算法第127-130页
     ·基本思想第128-129页
     ·算法描述第129-130页
 第五节 性能测试及分析第130-137页
 第六节 本章小节第137-139页
第七章 总结与展望第139-143页
 第一节 工作内容总结第139-140页
 第二节 主要的创新点第140-141页
 第三节 未来研究方向第141-143页
参考文献第143-153页
致谢第153-154页
个人简历 在学期间发表的学术论文与研究成果第154页

论文共154页,点击 下载论文
上一篇:基于社会网络的语义Web服务发现与组合研究
下一篇:冗余机器人的运动学及轨迹规划的研究