基于云计算的分布式处理框架的研究与设计
摘要 | 第1-5页 |
ABSTRACT | 第5-10页 |
第一章 引言 | 第10-15页 |
·研究背景及意义 | 第10-11页 |
·国内外研究现状 | 第11-13页 |
·国外云计算平台简介 | 第11-12页 |
·国内云计算平台简介 | 第12-13页 |
·论文工作 | 第13-14页 |
·论文组织结构 | 第14-15页 |
第二章 相关技术研究 | 第15-26页 |
·云计算概述 | 第15-18页 |
·云计算概念 | 第15-16页 |
·云计算体系结构 | 第16-17页 |
·云计算的优势 | 第17-18页 |
·分布式数据处理模型MapReduce | 第18-24页 |
·MapReduce概念 | 第18-19页 |
·MapReduce工作流程 | 第19-21页 |
·MapReduce推测执行机制 | 第21-22页 |
·MapReduce实例分析 | 第22-24页 |
·Web Service概述 | 第24-25页 |
·本章小结 | 第25-26页 |
第三章 分布式处理框架设计 | 第26-46页 |
·系统框架整体设计 | 第26-27页 |
·硬件资源管理层 | 第27-32页 |
·分布式文件系统体系结构 | 第28-29页 |
·分布式文件系统关键运行机制 | 第29-31页 |
·分布式文件系统API | 第31-32页 |
·业务逻辑层 | 第32-43页 |
·用户管理模块 | 第32-34页 |
·文件管理模块 | 第34-35页 |
·业务信息统计模块 | 第35-40页 |
·电子单证转换模块 | 第40-41页 |
·编程接口调用模块 | 第41-43页 |
·用户交互层 | 第43-45页 |
·本章小结 | 第45-46页 |
第四章 作业调度的研究及优化 | 第46-62页 |
·作业调度静态调优 | 第46-51页 |
·Map阶段参数调优及原理 | 第46-48页 |
·Reduce阶段参数调优及原理 | 第48-51页 |
·Hadoop现有作业调度算法分析 | 第51-52页 |
·两级队列期限驱动调度算法 | 第52-61页 |
·算法设计思想 | 第52-55页 |
·算法实现 | 第55-60页 |
·算法分析 | 第60-61页 |
·算法优点 | 第61页 |
·本章小结 | 第61-62页 |
第五章 实验结果及分析 | 第62-69页 |
·实验环境部署 | 第62-63页 |
·单作业情况下调优前后系统性能比较 | 第63-65页 |
·两级队列期限驱动算法执行效果 | 第65-68页 |
·公平性验证 | 第65-66页 |
·实时性验证 | 第66-67页 |
·执行效率验证 | 第67-68页 |
·本章小结 | 第68-69页 |
第六章 总结与展望 | 第69-70页 |
致谢 | 第70-71页 |
参考文献 | 第71-73页 |