分布式数据流系统中负载均衡技术研究
| 房俊华博士学位论文答辩委员会成员名单 | 第5-6页 |
| 摘要 | 第6-8页 |
| ABSTRACT | 第8-10页 |
| 第一章 引言 | 第17-29页 |
| 1.1 研究背景 | 第17-20页 |
| 1.1.1 数据处理需求 | 第17-18页 |
| 1.1.2 数据流处理系统 | 第18-20页 |
| 1.2 研究内容和面临的挑战 | 第20-24页 |
| 1.3 本文的主要贡献 | 第24-27页 |
| 1.3.1 基于key的操作负载均衡 | 第24-25页 |
| 1.3.2 连接负载均衡 | 第25-26页 |
| 1.3.3 容错负载均衡 | 第26-27页 |
| 1.4 章节安排 | 第27-29页 |
| 第二章 背景知识及研究现状 | 第29-45页 |
| 2.1 分布式并行数据流处理系统概述 | 第29-31页 |
| 2.1.1 数据流系统架构 | 第29-30页 |
| 2.1.2 数据流处理的负载均衡 | 第30-31页 |
| 2.2 相关工作 | 第31-43页 |
| 2.2.1 分布式并行数据流的均衡处理 | 第33-35页 |
| 2.2.2 可扩展的数据流连接策略 | 第35-40页 |
| 2.2.3 实时处理系统的容错机制 | 第40-43页 |
| 2.3 本章小结 | 第43-45页 |
| 第三章 基于key的操作负载均衡 | 第45-77页 |
| 3.1 预备知识 | 第45-49页 |
| 3.1.1 问题定义 | 第47-49页 |
| 3.1.2 优化目标 | 第49页 |
| 3.2 算法设计 | 第49-59页 |
| 3.2.1 LLFD算法 | 第50-55页 |
| 3.2.2 MinTable与MinMig算法 | 第55-57页 |
| 3.2.3 Mixed算法 | 第57-59页 |
| 3.3 性能提升 | 第59-63页 |
| 3.3.1 Mixed算法中数据概要表示法 | 第60-61页 |
| 3.3.2 负载分层表示 | 第61-63页 |
| 3.4 实验与分析 | 第63-76页 |
| 3.4.1 实验设置 | 第63-65页 |
| 3.4.2 实验结果及分析 | 第65-76页 |
| 3.5 本章小结 | 第76-77页 |
| 第四章 基于key的混合拆分负载均衡方法 | 第77-93页 |
| 4.1 动机及目标 | 第77-78页 |
| 4.2 混合拆分设计 | 第78-82页 |
| 4.2.1 数据分发策略 | 第78-79页 |
| 4.2.2 相关定义 | 第79-81页 |
| 4.2.3 代价分析 | 第81-82页 |
| 4.3 均衡调整算法 | 第82-86页 |
| 4.3.1 迁移计划制定架构 | 第82-83页 |
| 4.3.2 快速制定迁移计划 | 第83-84页 |
| 4.3.3 综合目标制定迁移计划 | 第84-85页 |
| 4.3.4 算法分析 | 第85-86页 |
| 4.4 实验与分析 | 第86-91页 |
| 4.4.1 实验设置 | 第86-88页 |
| 4.4.2 实验结果及分析 | 第88-91页 |
| 4.5 本章小结 | 第91-93页 |
| 第五章 动态负载下的数据流连接方法 | 第93-111页 |
| 5.1 预备知识 | 第93-94页 |
| 5.1.1 连接矩阵模型 | 第93-94页 |
| 5.1.2 优化目标 | 第94页 |
| 5.2 动态负载连接方法 | 第94-98页 |
| 5.2.1 模型设计 | 第95-96页 |
| 5.2.2 架构生成 | 第96-98页 |
| 5.3 算法实现 | 第98-104页 |
| 5.3.1 数据路由 | 第99-101页 |
| 5.3.2 处理节点映射关系 | 第101-102页 |
| 5.3.3 迁移计划制定 | 第102-104页 |
| 5.4 实验与分析 | 第104-109页 |
| 5.4.1 实验设置 | 第104-105页 |
| 5.4.2 实验结果及分析 | 第105-109页 |
| 5.5 本章小结 | 第109-111页 |
| 第六章 代价敏感的数据流连接方法 | 第111-129页 |
| 6.1 动机及目标 | 第111-112页 |
| 6.2 代价敏感连接方法 | 第112-115页 |
| 6.2.1 代价分析 | 第112-113页 |
| 6.2.2 代价敏感的连接矩阵模型 | 第113-115页 |
| 6.3 算法设计 | 第115-121页 |
| 6.3.1 处理单元映射 | 第116-117页 |
| 6.3.2 迁移计划制定 | 第117-121页 |
| 6.4 实验与分析 | 第121-127页 |
| 6.4.1 实验设置 | 第121页 |
| 6.4.2 实验结果及分析 | 第121-127页 |
| 6.5 本章总结 | 第127-129页 |
| 第七章 均衡敏感的容错机制 | 第129-147页 |
| 7.1 动机及目标 | 第129-131页 |
| 7.2 容错机制 | 第131-136页 |
| 7.2.1 备份状态的同步 | 第131-134页 |
| 7.2.2 数据集容错的恢复 | 第134-136页 |
| 7.3 FLB算法设计 | 第136-140页 |
| 7.3.1 路由策略 | 第136页 |
| 7.3.2 均衡迁移计划 | 第136-140页 |
| 7.4 实验与分析 | 第140-145页 |
| 7.4.1 实验设置 | 第140-141页 |
| 7.4.2 实验结果及分析 | 第141-145页 |
| 7.5 本章小结 | 第145-147页 |
| 第八章 总结与展望 | 第147-151页 |
| 8.1 本文工作总结 | 第147-148页 |
| 8.2 未来工作展望 | 第148-151页 |
| 参考文献 | 第151-161页 |
| 致谢 | 第161-163页 |
| 攻读博士学位期间发表论文 | 第163页 |
