首页--工业技术论文--自动化技术、计算机技术论文--计算技术、计算机技术论文--电子数字计算机(不连续作用电子计算机)论文--各种电子数字计算机论文

MapReduce模型在Hadoop实现中的性能分析及改进优化

摘要第1-5页
ABSTRACT第5-10页
第一章 引言第10-15页
   ·研究背景第10-13页
   ·本文的工作第13页
   ·本文的结构第13-14页
   ·本章小结第14-15页
第二章 相关技术和系统平台研究第15-33页
   ·云计算概述第15-20页
     ·云计算的基本概念第15-17页
     ·云计算模型第17页
     ·云计算的特性和应用第17-20页
       ·云计算的特性第18页
       ·云计算的应用第18-20页
   ·并行计算概述第20-23页
     ·并行计算的基本概念第20-21页
     ·并行计算中并行机模式第21-22页
     ·并行计算模型第22-23页
     ·并行算法第23页
   ·MAPREDUCE 模型概述第23-32页
     ·MapReduce 的编程模型第24页
     ·MapReduce 的典型应用第24-25页
     ·MapReduce 模型的实现方法第25-29页
         ·G oogle 计算环境第25-26页
         ·M apReduce 实现框架第26-27页
         ·M apReduce 的任务颗粒度和并行第27-28页
         ·M apReduce 的容错考虑第28-29页
     ·Hadoop 中调度算法的研究第29-32页
   ·本章小结第32-33页
第三章 MAPREDUCE 在HADOOP 中的性能评估及分析第33-52页
   ·HADOOP 平台的研究第33-36页
     ·主从式的HDFS第33-34页
     ·主从式计算系统MapReduce第34-36页
   ·MAPREDUCE 性能评估指标的设计第36-37页
   ·设计基准测试程序集第37-39页
     ·基准测试程序的设计第37-39页
       ·字数统计第37页
       ·网页级别第37-38页
       ·PennySort第38-39页
     ·基准测试程序集的衡量指标第39页
   ·实验平台的搭建第39-42页
     ·集群配置方案第39-40页
     ·Hadoop 的配置与安装第40-42页
       ·配置ssh 和JDK第40-41页
       ·Hadoop 的安装配置第41-42页
   ·实验方案设计第42-44页
     ·数据结构的设计第42-43页
     ·对统计信息进行分析第43-44页
   ·实验结果及分析第44-49页
     ·任务独立响应时间与任务总响应时间第44-45页
     ·平均响应时间第45-46页
       ·同构机群下MapReduce 的平均响应时间第45页
       ·异构机群下MapReduce 的平均响应时间第45-46页
     ·加速比第46-48页
     ·公平性第48-49页
   ·对实验结果的分析第49-51页
   ·本章小结第51-52页
第四章 对HADOOP 调度算法的改进优化第52-72页
   ·HADOOP 中调度程序的研究第52-56页
     ·推测执行任务(Speculative Executing Task)第52-53页
     ·Hadoop 中的推测执行第53-54页
     ·Hadoop 调度程序中的几点假设第54-55页
     ·异构性使得Hadoop 中的假设失效第55-56页
       ·机群的异构性第55页
       ·异构行推翻Hadoop 的其他假设第55-56页
   ·HADOOP 中与任务调度有关的类第56-60页
     ·Job 创建过程第57-58页
     ·Job 初始化过程第58-59页
     ·Task 执行过程第59-60页
   ·基于优先级加权的滑动窗口调度算法第60-72页
     ·权重的计算方法及任务分配策略第63-65页
       ·权重的计算方法第63-64页
       ·一个轮转周期内的任务分配策略第64-65页
     ·自适应调整滑动窗口的大小第65-67页
       ·调整滑动窗口大小的基本思想和流程第66页
       ·滑动窗口调整算法第66-67页
     ·更效率的推测执行第67-70页
       ·掉队者判定策略第68-69页
       ·慢节点判定策略第69页
       ·推测执行的实现第69-70页
     ·PWSW 算法较Hadoop 调度算法的优势第70-71页
     ·本章小结第71-72页
第五章 实验及结果分析第72-77页
   ·实验平台选择及配置第72页
   ·实验结果及分析第72-76页
   ·实验结果分析第76页
   ·本章小结第76-77页
第六章 总结和展望第77-78页
致谢第78-79页
参考文献第79-82页
硕士期间经历及取得的成果第82-83页

论文共83页,点击 下载论文
上一篇:多处理器系统中的线程调度研究
下一篇:高性能高可用键值存储系统的设计与实现