Hadoop框架的扩展和性能调优
| 摘要 | 第1-5页 |
| ABSTRACT | 第5-10页 |
| 1 绪论 | 第10-14页 |
| ·研究背景 | 第10-11页 |
| ·国内外研究现状 | 第11-12页 |
| ·论文研究内容 | 第12页 |
| ·论文组织结构 | 第12-13页 |
| ·本章小结 | 第13-14页 |
| 2 理论基础 | 第14-21页 |
| ·云计算 | 第14-17页 |
| ·云计算的定义 | 第14页 |
| ·云计算的发展历程 | 第14-15页 |
| ·云计算的核心技术 | 第15-16页 |
| ·云计算的主要类型 | 第16-17页 |
| ·网格计算 | 第17-20页 |
| ·网格计算的定义与产生的背景 | 第17-18页 |
| ·网格计算的体系结构 | 第18-20页 |
| ·网格计算的核心技术 | 第20页 |
| ·云计算与网格计算的区别 | 第20页 |
| ·本章小结 | 第20-21页 |
| 3 Hadoop框架及LSF框架分析 | 第21-44页 |
| ·MapReduce | 第21-32页 |
| ·MapReduce 概述 | 第21页 |
| ·MapReduce核心功能分析 | 第21-30页 |
| ·MapReduce的Job工作流程 | 第30-32页 |
| ·HDFS架构设计 | 第32-35页 |
| ·HDFS设计的前提和目标 | 第33页 |
| ·HDFS整体架构 | 第33-34页 |
| ·HDFS的数据复制及副本存放策略 | 第34页 |
| ·HDFS的磁盘容错控制 | 第34-35页 |
| ·HDFS存储数据的集群均衡性 | 第35页 |
| ·FSDirectory和FImage | 第35-38页 |
| ·LSF | 第38-43页 |
| ·LSF架构简述 | 第38-39页 |
| ·LSF base 系统 | 第39-40页 |
| ·LSF base与应用的交互 | 第40-41页 |
| ·LSF batch 系统 | 第41页 |
| ·LSF batch与应用交互 | 第41-43页 |
| ·本章小结 | 第43-44页 |
| 4 Hadoop框架与LSF框架整合 | 第44-56页 |
| ·Hadoop企业级应用的弱点分析 | 第44-45页 |
| ·Hadoop系统单点设计瓶颈 | 第44-45页 |
| ·作业调度方式单一 | 第45页 |
| ·异构平台兼容性 | 第45页 |
| ·LSF与Hadoop集成 | 第45-47页 |
| ·LSH架构分析 | 第46页 |
| ·LSH作业调度算法选择 | 第46-47页 |
| ·框架集成的关键技术 | 第47-54页 |
| ·NameNode热备份与恢复 | 第47-49页 |
| ·Hadoop调度算法配置 | 第49-51页 |
| ·Hadoop自适应调用LSF的调度算法 | 第51-54页 |
| ·LSH架构的优势分析 | 第54-55页 |
| ·本章小结 | 第55-56页 |
| 5 实验及结果分析 | 第56-67页 |
| ·实验平台的选择与配置 | 第56-62页 |
| ·硬件环境配置 | 第56-57页 |
| ·软件环境配置 | 第57-62页 |
| ·实验示例设计 | 第62-66页 |
| ·实验结论 | 第66页 |
| ·本章小结 | 第66-67页 |
| 6 总结与展望 | 第67-68页 |
| ·总结 | 第67页 |
| ·展望 | 第67-68页 |
| 致谢 | 第68-69页 |
| 参考文献 | 第69-72页 |
| 攻读硕士学位期间发表的论文 | 第72页 |
