基于云计算的分布式处理框架的研究与设计
| 摘要 | 第1-5页 |
| ABSTRACT | 第5-10页 |
| 第一章 引言 | 第10-15页 |
| ·研究背景及意义 | 第10-11页 |
| ·国内外研究现状 | 第11-13页 |
| ·国外云计算平台简介 | 第11-12页 |
| ·国内云计算平台简介 | 第12-13页 |
| ·论文工作 | 第13-14页 |
| ·论文组织结构 | 第14-15页 |
| 第二章 相关技术研究 | 第15-26页 |
| ·云计算概述 | 第15-18页 |
| ·云计算概念 | 第15-16页 |
| ·云计算体系结构 | 第16-17页 |
| ·云计算的优势 | 第17-18页 |
| ·分布式数据处理模型MapReduce | 第18-24页 |
| ·MapReduce概念 | 第18-19页 |
| ·MapReduce工作流程 | 第19-21页 |
| ·MapReduce推测执行机制 | 第21-22页 |
| ·MapReduce实例分析 | 第22-24页 |
| ·Web Service概述 | 第24-25页 |
| ·本章小结 | 第25-26页 |
| 第三章 分布式处理框架设计 | 第26-46页 |
| ·系统框架整体设计 | 第26-27页 |
| ·硬件资源管理层 | 第27-32页 |
| ·分布式文件系统体系结构 | 第28-29页 |
| ·分布式文件系统关键运行机制 | 第29-31页 |
| ·分布式文件系统API | 第31-32页 |
| ·业务逻辑层 | 第32-43页 |
| ·用户管理模块 | 第32-34页 |
| ·文件管理模块 | 第34-35页 |
| ·业务信息统计模块 | 第35-40页 |
| ·电子单证转换模块 | 第40-41页 |
| ·编程接口调用模块 | 第41-43页 |
| ·用户交互层 | 第43-45页 |
| ·本章小结 | 第45-46页 |
| 第四章 作业调度的研究及优化 | 第46-62页 |
| ·作业调度静态调优 | 第46-51页 |
| ·Map阶段参数调优及原理 | 第46-48页 |
| ·Reduce阶段参数调优及原理 | 第48-51页 |
| ·Hadoop现有作业调度算法分析 | 第51-52页 |
| ·两级队列期限驱动调度算法 | 第52-61页 |
| ·算法设计思想 | 第52-55页 |
| ·算法实现 | 第55-60页 |
| ·算法分析 | 第60-61页 |
| ·算法优点 | 第61页 |
| ·本章小结 | 第61-62页 |
| 第五章 实验结果及分析 | 第62-69页 |
| ·实验环境部署 | 第62-63页 |
| ·单作业情况下调优前后系统性能比较 | 第63-65页 |
| ·两级队列期限驱动算法执行效果 | 第65-68页 |
| ·公平性验证 | 第65-66页 |
| ·实时性验证 | 第66-67页 |
| ·执行效率验证 | 第67-68页 |
| ·本章小结 | 第68-69页 |
| 第六章 总结与展望 | 第69-70页 |
| 致谢 | 第70-71页 |
| 参考文献 | 第71-73页 |