MapReduce模型在Hadoop中的性能优化及改进
摘要 | 第1-6页 |
ABSTRACT | 第6-14页 |
第一章 绪论 | 第14-18页 |
·研究背景与意义 | 第14-15页 |
·问题与动机 | 第15-16页 |
·论文研究内容 | 第16页 |
·论文组织结构 | 第16-17页 |
·本章小结 | 第17-18页 |
第二章 基础知识和相关技术 | 第18-42页 |
·什么是云计算 | 第18-20页 |
·云计算概述 | 第18页 |
·云计算的实现机制 | 第18-19页 |
·云计算的特点 | 第19-20页 |
·Hadoop平台背景 | 第20-25页 |
·Hadoop简介 | 第20-22页 |
·与其他系统对比 | 第22-23页 |
·Hadoop技术背景 | 第23-25页 |
·Hadoop分布式文件系统(HDFS) | 第25-31页 |
·前提和设计目标 | 第25-26页 |
·HDFS体系架构 | 第26-27页 |
·数据组织 | 第27-28页 |
·数据复制 | 第28页 |
·通信协议 | 第28-29页 |
·健壮性 | 第29-30页 |
·数据流 | 第30-31页 |
·Hadoop的MapReduce框架 | 第31-40页 |
·体系架构 | 第32页 |
·MapReduce计算模型 | 第32-36页 |
·MapReduce任务执行过程 | 第36-37页 |
·容错设计 | 第37-38页 |
·任务调度 | 第38-40页 |
·本章小结 | 第40-42页 |
第三章 MapReduce计算性能优化 | 第42-56页 |
·数据读写过程 | 第42-44页 |
·性能瓶颈分析 | 第44页 |
·优化方案 | 第44-47页 |
·优化实例 | 第47-51页 |
·任务需求 | 第47页 |
·计算过程分析与实现 | 第47-50页 |
·性能分析及优化 | 第50-51页 |
·实验平台搭建 | 第51-54页 |
·集群配置方案 | 第52页 |
·Hadoop配置与安装 | 第52-54页 |
·实验结果及分析 | 第54-55页 |
·本章小结 | 第55-56页 |
第四章 MapReduce计算模型改进 | 第56-66页 |
·MapReduce任务分配问题 | 第56-57页 |
·Map端 | 第56-57页 |
·Reduce端 | 第57页 |
·数据不均衡的原因 | 第57页 |
·MapReduce改进方案 | 第57-60页 |
·改进方案的目标 | 第57-58页 |
·改进方案 | 第58-60页 |
·实验结果及分析 | 第60-64页 |
·测试用例及数据分析 | 第60-62页 |
·结果分析 | 第62-64页 |
·本章小结 | 第64-66页 |
第五章 总结与展望 | 第66-68页 |
·工作总结 | 第66页 |
·进一步研究设想 | 第66-68页 |
参考文献 | 第68-70页 |
致谢 | 第70-72页 |
研究成果及发表的学术论文 | 第72-74页 |
作者简介 | 第74-75页 |
硕士研究生学位论文答辩委员会决议书 | 第75-76页 |