基于内存的MapReduce系统效率优化机制研究
| 摘要 | 第4-5页 |
| Abstract | 第5页 |
| 1 绪论 | 第7-15页 |
| 1.1 研究背景和意义 | 第7-9页 |
| 1.2 国内外研究现状 | 第9-12页 |
| 1.3 研究内容 | 第12-13页 |
| 1.4 论文框架结构 | 第13-15页 |
| 2 系统架构与设计 | 第15-25页 |
| 2.1 Spark概述 | 第15-17页 |
| 2.2 问题分析 | 第17-20页 |
| 2.3 系统结构与功能模块 | 第20-23页 |
| 2.4 系统关键问题与难点分析 | 第23-24页 |
| 2.5 小结 | 第24-25页 |
| 3 系统实现及关键技术 | 第25-40页 |
| 3.1 基于对象复用的Shuffle机制 | 第25-29页 |
| 3.2 内存感知的任务分发机制 | 第29-34页 |
| 3.3 内嵌负载均衡器的任务调度器 | 第34-39页 |
| 3.4 小结 | 第39-40页 |
| 4 系统测试和性能分析 | 第40-50页 |
| 4.1 测试环境与测试应用 | 第40-41页 |
| 4.2 系统性能测试与分析 | 第41-48页 |
| 4.3 小结 | 第48-50页 |
| 5 总结与展望 | 第50-52页 |
| 致谢 | 第52-54页 |
| 参考文献 | 第54-58页 |
| 附录1 攻读硕士学位期间参加的主要科研项目 | 第58-59页 |
| 附录2 攻读硕士期间申请的发明专利 | 第59-60页 |
| 附录3 攻读学位期间发表的论文 | 第60页 |
