分布式流处理系统中的任务调度
摘要 | 第9-10页 |
ABSTRACT | 第10页 |
第1章 绪论 | 第11-16页 |
1.1 课题研究背景及意义 | 第11-13页 |
1.1.1 研究背景 | 第11-12页 |
1.1.2 研究意义 | 第12-13页 |
1.2 国内外研究现状 | 第13-14页 |
1.3 本文主要工作 | 第14-15页 |
1.4 本文组织结构 | 第15-16页 |
第2章 相关工作 | 第16-21页 |
2.1 分布式流处理系统 | 第16-17页 |
2.2 分布式流处理的相关应用 | 第17-18页 |
2.3 分布式流处理中任务调度相关研究 | 第18-19页 |
2.4 云计算中调度问题相关研究 | 第19-21页 |
第3章 分布式流处理平台及其调度算法 | 第21-26页 |
3.1 Storm流处理平台抽象 | 第21-23页 |
3.1.1 Storm平台核心抽象 | 第21-22页 |
3.1.2 Storm平台数据分组策略 | 第22-23页 |
3.2 分布式流数据处理系统调度算法 | 第23-25页 |
3.2.1 轮询调度算法 | 第24页 |
3.2.2 隔离调度和多租户调度 | 第24页 |
3.2.3 流量感知的调度算法 | 第24页 |
3.2.4 资源感知的调度算法 | 第24-25页 |
3.2.5 自适应的分层调度算法 | 第25页 |
3.3 本章小结 | 第25-26页 |
第4章 最小化资源使用调度算法 | 第26-41页 |
4.1 问题提出 | 第26-27页 |
4.2 问题定义及分析 | 第27-33页 |
4.2.1 集群资源 | 第27-29页 |
4.2.2 任务分配 | 第29-31页 |
4.2.3 数据处理时间 | 第31-33页 |
4.3 调度算法 | 第33-39页 |
4.3.1 任务初始分配算法 | 第33-35页 |
4.3.2 任务运行状态监控算法 | 第35-38页 |
4.3.3 动态调整算法 | 第38-39页 |
4.4 算法分析 | 第39-40页 |
4.5 本章小结 | 第40-41页 |
第5章 基于Storm流数据处理系统的实现 | 第41-55页 |
5.1 系统整体结构 | 第41-42页 |
5.2 系统实现 | 第42-44页 |
5.2.1 数据分发策略与节点扩展 | 第43-44页 |
5.2.2 节点动态改变 | 第44页 |
5.3 实验准备 | 第44-46页 |
5.3.1 实验环境 | 第44-45页 |
5.3.2 实验基准 | 第45页 |
5.3.3 实验数据 | 第45-46页 |
5.3.4 评价指标 | 第46页 |
5.4 实验分析 | 第46-54页 |
5.4.1 简单拓扑 | 第46-50页 |
5.4.2 复杂拓扑 | 第50-54页 |
5.5 本章小结 | 第54-55页 |
第6章 总结与展望 | 第55-57页 |
6.1 总结 | 第55页 |
6.2 未来的工作和展望 | 第55-57页 |
参考文献 | 第57-61页 |
致谢 | 第61-62页 |
攻读学位期间发表的学术论文和参加科研情况 | 第62-63页 |
学位论文评阅及答辩情况表 | 第63页 |