摘要 | 第4-5页 |
Abstract | 第5页 |
第1章 绪论 | 第8-17页 |
1.1 课题来源 | 第8-9页 |
1.2 项目背景及研究的目的和意义 | 第9-11页 |
1.3 与课题相关的国内外研究状况 | 第11-15页 |
1.3.1 管道化改进思想 | 第11-13页 |
1.3.2 内存缓存改进思想 | 第13-14页 |
1.3.3 轻量级压缩改进思想 | 第14-15页 |
1.4 本论文的主要内容 | 第15-17页 |
第2章 系统需求分析与核心问题研究 | 第17-31页 |
2.1 业务需求分析 | 第17-22页 |
2.1.1 业务需求分析 | 第17-20页 |
2.1.2 系统优化标准 | 第20-22页 |
2.2 中间数据存贮与传输优化问题研究 | 第22-29页 |
2.2.1 Map 任务中间数据存贮问题 | 第23-25页 |
2.2.2 中间数据传输优化问题 | 第25-28页 |
2.2.3 Reduce 任务中间数据存贮问题 | 第28-29页 |
2.3 中间数据存贮与传输优化的非功能需求 | 第29-30页 |
2.4 本章小结 | 第30-31页 |
第3章 MapReduce 核心模块设计 | 第31-47页 |
3.1 总体设计 | 第31-33页 |
3.1.1 系统 Shuffler 部分体系结构 | 第31-32页 |
3.1.2 Shuffle 系统读写中间数据方式 | 第32-33页 |
3.2 Map 任务中间数据存贮模块的设计 | 第33-38页 |
3.2.1 Map 任务中间数据存贮模块的类设计 | 第33-37页 |
3.2.2 Map 任务中间数据存贮模块的接口设计 | 第37-38页 |
3.3 中间数据传输优化模块的设计 | 第38-43页 |
3.3.1 中间数据传输优化模块的详细设计 | 第38-41页 |
3.3.2 中间数据传输优化模块的接口设计 | 第41-43页 |
3.4 Reduce 任务中间数据存贮模块的设计 | 第43-46页 |
3.4.1 Reduce 任务中间数据存贮模块的详细设计 | 第43-45页 |
3.4.2 Reduce 任务中间数据存贮模块的接口设计 | 第45-46页 |
3.5 本章小结 | 第46-47页 |
第4章 MapReduce 核心模块实现 | 第47-56页 |
4.1 Map 任务中间数据存贮模块实现 | 第47-51页 |
4.2 中间数据传输优化模块实现 | 第51-52页 |
4.3 Reduce 任务中间数据存贮模块实现 | 第52-55页 |
4.4 本章小结 | 第55-56页 |
第5章 系统运行与测试 | 第56-68页 |
5.1 系统配置及运行情况 | 第56-60页 |
5.1.1 系统运行环境 | 第56-57页 |
5.1.2 系统运行情况 | 第57-60页 |
5.2 系统测试 | 第60-67页 |
5.2.1 系统测试环境 | 第60页 |
5.2.2 系统测试用例及分析 | 第60-64页 |
5.2.3 系统性能优化测试与分析 | 第64-67页 |
5.3 本章小结 | 第67-68页 |
结论 | 第68-69页 |
参考文献 | 第69-73页 |
致谢 | 第73-74页 |
个人简历 | 第74页 |