摘要 | 第5-6页 |
Abstract | 第6页 |
第一章 概述 | 第9-26页 |
1.1 研究背景 | 第9-10页 |
1.2 国内外研究现状和趋势 | 第10-23页 |
1.2.1 离线计算框架 | 第10-13页 |
1.2.2 流计算 | 第13-16页 |
1.2.3 语言抽象层的研究 | 第16-20页 |
1.2.4 统一资源调度系统的研究 | 第20-23页 |
1.3 研究内容 | 第23-25页 |
1.4 论文组织结构 | 第25-26页 |
第二章 多框架系统概述 | 第26-32页 |
2.1 SummingBird的架构 | 第26-27页 |
2.2 StormOnYarn | 第27-28页 |
2.3 HadoopDB | 第28-29页 |
2.4 Polybase | 第29-30页 |
2.5 YarnPlus | 第30-31页 |
2.6 本章总结 | 第31-32页 |
第三章 系统架构描述 | 第32-41页 |
3.1 系统架构综述 | 第32-33页 |
3.2 系统架构特点 | 第33-34页 |
3.3 框架选择器的设计 | 第34-39页 |
3.3.1 成本模型的定义 | 第34-35页 |
3.3.2 框架计算能力的定义 | 第35页 |
3.3.3 匹配度的定义 | 第35页 |
3.3.4 算法输入描述 | 第35-36页 |
3.3.5 算法输出描述 | 第36页 |
3.3.6 算法执行过程 | 第36-37页 |
3.3.7 Hadoop成本的计算 | 第37-38页 |
3.3.8 Storm成本的计算 | 第38-39页 |
3.4 Hadoop与Storm在架构中的融合方式 | 第39-40页 |
3.5 本章总结 | 第40-41页 |
第四章 系统关键模块实现 | 第41-55页 |
4.1 语言层的实现 | 第42-45页 |
4.2 Storm与Yarn的集成 | 第45-47页 |
4.3 任务执行层的实现 | 第47-51页 |
4.3.1 普通查询语句的实现 | 第48-50页 |
4.3.2 双表Join的实现 | 第50-51页 |
4.4 优化 | 第51-53页 |
4.4.1 Storm数据源的优化 | 第51-52页 |
4.4.2 Storm容器状态快速查询 | 第52页 |
4.4.3 Join算法的优化 | 第52-53页 |
4.5 本章小结 | 第53-55页 |
第五章 系统测试 | 第55-63页 |
5.1 测试环境 | 第55-56页 |
5.2 性能测试 | 第56-61页 |
5.2.1 处理速度测试 | 第57-59页 |
5.2.2 吞吐量测试 | 第59-61页 |
5.3 扩展性测试 | 第61-62页 |
5.4 本章总结 | 第62-63页 |
第六章 总结 | 第63-66页 |
6.1 论文总结 | 第63-64页 |
6.2 存在的问题与不足 | 第64页 |
6.3 后续工作展望 | 第64-66页 |
致谢 | 第66-67页 |
参考文献 | 第67-70页 |