| 摘要 | 第5-6页 |
| ABSTRACT | 第6-7页 |
| 缩略语对照表 | 第11-14页 |
| 第一章 绪论 | 第14-22页 |
| 1.1 研究背景及意义 | 第14-17页 |
| 1.2 国内外研究现状 | 第17-19页 |
| 1.3 论文研究内容 | 第19页 |
| 1.4 论文组织结构 | 第19-22页 |
| 第二章 相关技术介绍 | 第22-32页 |
| 2.1 Spark数据处理平台 | 第22-26页 |
| 2.2 IBM企业级分布式计算框架Symphony | 第26-28页 |
| 2.3 Spark与YARN、Mesos、EGO集成比较 | 第28-30页 |
| 2.4 基本术语介绍 | 第30页 |
| 2.5 本章小结 | 第30-32页 |
| 第三章 基于Spark-on-EGO资源调度器的需求分析 | 第32-40页 |
| 3.1 总体业务陈述 | 第32-35页 |
| 3.2 功能性需求描述 | 第35-37页 |
| 3.2.1 配置动态获取功能 | 第35-36页 |
| 3.2.2 配置解析与计算功能 | 第36页 |
| 3.2.3 资源调度器基本功能 | 第36-37页 |
| 3.3 非功能性需求 | 第37-38页 |
| 3.4 本章小结 | 第38-40页 |
| 第四章 基于Spark-on-EGO资源调度器的设计与实现 | 第40-70页 |
| 4.1 资源调度器功能模块设计 | 第40-42页 |
| 4.2 动态资源分配策略DynamicTag的设计与实现 | 第42-48页 |
| 4.2.1 配置项的表示 | 第42-43页 |
| 4.2.2 配置信息解析与计算过程 | 第43-45页 |
| 4.2.3 DynamicTag在调度器中的实现 | 第45-48页 |
| 4.3 资源调度器各模块详细设计与实现 | 第48-56页 |
| 4.3.1 配置读取模块设计与实现 | 第48-49页 |
| 4.3.2 配置解析与计算模块设计与实现 | 第49-51页 |
| 4.3.3 Delegator模块设计与实现 | 第51-52页 |
| 4.3.4 Policy模块设计与实现 | 第52-55页 |
| 4.3.5 Resource Allocator模块设计与实现 | 第55-56页 |
| 4.4 模块间交互流程 | 第56-68页 |
| 4.4.1 Driver在调度器中的调度流程 | 第56-58页 |
| 4.4.2 Application在调度器中的调度流程 | 第58-68页 |
| 4.5 本章小结 | 第68-70页 |
| 第五章 实验过程及结果分析 | 第70-86页 |
| 5.1 实验环境介绍 | 第70-72页 |
| 5.2 实验过程与结果分析 | 第72-84页 |
| 5.2.1 配置读取模块测试 | 第72-75页 |
| 5.2.2 配置解析与计算模块测试 | 第75-77页 |
| 5.2.3 资源调度器基本功能测试 | 第77-82页 |
| 5.2.4 非功能性需求测试 | 第82-84页 |
| 5.3 本章小结 | 第84-86页 |
| 第六章 总结与展望 | 第86-90页 |
| 6.1 工作总结 | 第86-87页 |
| 6.2 未来工作展望 | 第87-90页 |
| 参考文献 | 第90-92页 |
| 致谢 | 第92-94页 |
| 作者简介 | 第94-95页 |
