首页--工业技术论文--自动化技术、计算机技术论文--计算技术、计算机技术论文--计算机软件论文--程序设计、软件工程论文--程序设计论文

MapReduce FairScheduler的高性能优化及超大规模集群模拟器设计及实现

摘要第1-5页
Abstract第5-10页
第1章 绪论第10-14页
   ·分布式计算相关背景第10-11页
   ·论文内容和目的第11-13页
   ·全文结构第13页
   ·本章小结第13-14页
第2章 MapReduce和Hadoop深度剖析第14-23页
   ·MapReduce原理第14-19页
     ·Shuffle和排序第16-19页
   ·Hadoop架构及原理第19-22页
     ·Hadoop的文件系统HDFS第20-21页
     ·主从式MapReduce系统第21-22页
   ·本章小结第22-23页
第3章 MapReduce调度器及FairScheduler原理第23-33页
   ·Hadoop作业调度简介第23-25页
   ·Hadoop作业调度策略第25-29页
     ·FIFO调度器第26页
     ·计算能力调度器第26-28页
     ·公平调度器第28-29页
   ·公平调度器设计第29-31页
     ·槽分配算法第29-30页
     ·槽的再分配第30-31页
     ·数据本地性第31页
   ·本章小结第31-33页
第4章 基于FairScheduler的高性能调度器优化第33-52页
   ·调度器的优化需求第33-34页
   ·调度器优化难点第34-35页
   ·调度器优化设计第35-49页
     ·概念解析第35-38页
     ·多任务分配第38页
     ·延迟调度策略第38-44页
     ·Out-Of-Band心跳第44页
     ·Shuffle独立第44-49页
   ·调度优化分析第49-51页
     ·响应时间分析第49-50页
     ·吞吐率分析第50-51页
     ·公平性分析第51页
   ·本章小结第51-52页
第5章 超大规模Hadoop集群模拟器的设计及实现第52-60页
   ·模拟器背景第52页
   ·模拟器难点分析第52-53页
   ·模拟器设计第53-59页
     ·模拟器架构第53-55页
     ·TaskTracker的模拟第55-57页
     ·作业的模拟第57-58页
     ·作业提交的模拟第58-59页
     ·调度器层的模拟第59页
   ·本章小结第59-60页
第6章 基于模拟器的FairScheduler优化有效性验证第60-73页
   ·平台环境第60-61页
     ·集群搭建第60页
     ·集群拓扑图第60-61页
   ·模拟器有效性验证第61-65页
     ·功能性验证第61-63页
     ·性能验证第63-65页
   ·基于FairScheduler优化的有效性验证第65-72页
     ·公平性验证第65-67页
     ·槽粘滞性验证第67-68页
     ·集群吞吐率验证第68-70页
     ·单个作业响应时间验证第70-71页
     ·性能验证分析第71-72页
   ·本章小结第72-73页
第7章 总结与展望第73-75页
   ·全文总结第73-74页
   ·Hadoop展望第74-75页
参考文献第75-77页
攻读硕士学位期间主要的研究成果第77-78页
致谢第78页

论文共78页,点击 下载论文
上一篇:安全相关软件的设计方法研究及应用
下一篇:头肩图像视频的自动分割