摘要 | 第4-6页 |
Abstract | 第6-7页 |
第1章 绪论 | 第10-15页 |
1.1 相关技术现状 | 第10-11页 |
1.1.1 流数据特点 | 第10-11页 |
1.2 课题研究背景和意义 | 第11-12页 |
1.3 本文工作 | 第12-13页 |
1.4 本文结构 | 第13-15页 |
第2章 相关工作 | 第15-19页 |
2.1 静态大数据处理技术 | 第15-16页 |
2.2 大规模流数据处理技术 | 第16页 |
2.3 动态分区与自动扩展技术 | 第16-18页 |
2.4 本章小结 | 第18-19页 |
第3章 流数据在线处理系统 SPATE | 第19-25页 |
3.1 灵活的流数据处理模型 | 第19-21页 |
3.2 虚拟交换节点 | 第21-22页 |
3.2.1 VSN 模型 | 第21-22页 |
3.2.2 VSN 映射关系表 | 第22页 |
3.3 数据分发流程 | 第22-24页 |
3.4 本章小结 | 第24-25页 |
第4章 动态在线数据分区策略与算法 | 第25-43页 |
4.1 问题描述 | 第25-28页 |
4.1.1 无状态/有状态操作 | 第25-26页 |
4.1.2 问题建模 | 第26-28页 |
4.2 约束条件 | 第28-30页 |
4.2.1 实时性约束 | 第28-30页 |
4.2.2 迁移代价约束 | 第30页 |
4.3 算法设计 | 第30-39页 |
4.3.1 算法思想 | 第30-31页 |
4.3.2 基础分区算法 | 第31-32页 |
4.3.3 实时控制算法 | 第32-33页 |
4.3.4 一致性哈希与 FFD 结合的优化算法 CFFDM | 第33-35页 |
4.3.5 迁移对象选择算法 | 第35-36页 |
4.3.6 迁移位置选择算法 | 第36-39页 |
4.4 迁移协议 | 第39-42页 |
4.4.1 状态定义与编程模型 | 第39-40页 |
4.4.2 两阶段状态迁移协议 | 第40-42页 |
4.5 本章小结 | 第42-43页 |
第5章 实验和数据分析 | 第43-53页 |
5.1 引言 | 第43页 |
5.2 系统原型实现 | 第43-45页 |
5.2.1 数据传输机制 | 第43-44页 |
5.2.2 在线 MapReduce 分区流程 | 第44-45页 |
5.3 CFFDM 算法测试结果与分析 | 第45-52页 |
5.3.1 实验环境 | 第45-46页 |
5.3.2 不同物品数量下对箱子数的影响 | 第46-48页 |
5.3.3 不同物品数量下对迁移成本的影响 | 第48-50页 |
5.3.4 不同物品内存占有量增大比率对突发性的影响 | 第50-51页 |
5.3.5 节点数量随流速变化 | 第51-52页 |
5.4 本章小结 | 第52-53页 |
第6章 总结与展望 | 第53-54页 |
参考文献 | 第54-58页 |
作者简介及在学期间取得的科研成果 | 第58-59页 |
致谢 | 第59页 |