分布式高可靠性海量数据处理系统中控节点设计与实现
| 摘要 | 第1-5页 |
| ABSTRACT | 第5-11页 |
| 第一章 引言 | 第11-17页 |
| ·研究背景 | 第11页 |
| ·国内外研究现状 | 第11-13页 |
| ·存在的主要问题 | 第13-14页 |
| ·论文选题 | 第14-15页 |
| ·本文工作内容与创新 | 第15-16页 |
| ·全文章节安排 | 第16页 |
| ·本章小结 | 第16-17页 |
| 第二章 基础理论与相关技术 | 第17-27页 |
| ·分布式计算概述 | 第17-19页 |
| ·分布式计算基础技术 | 第17-18页 |
| ·分布式计算平台的架构 | 第18-19页 |
| ·云计算相关技术 | 第19-24页 |
| ·云计算主要特征 | 第19-20页 |
| ·MapReduce 框架 | 第20-22页 |
| ·典型云计算平台架构分析 | 第22-24页 |
| ·任务调度与负载均衡 | 第24-26页 |
| ·任务调度 | 第25页 |
| ·异构环境下的负载均衡 | 第25-26页 |
| ·本章小结 | 第26-27页 |
| 第三章 系统概要设计 | 第27-39页 |
| ·项目背景与需求 | 第27页 |
| ·系统架构与特点 | 第27-30页 |
| ·DMDPS 架构 | 第27-28页 |
| ·DMDPS 节点详细介绍 | 第28-30页 |
| ·数据库集群 | 第30页 |
| ·系统基本功能 | 第30-32页 |
| ·中控节点设计 | 第32页 |
| ·中控节点设计需求 | 第32-33页 |
| ·中控节点概要设计 | 第33-38页 |
| ·网络交互子模块概要设计 | 第34-35页 |
| ·任务管理与调度子模块概要设计 | 第35-37页 |
| ·负载均衡子模块概要设计 | 第37页 |
| ·主备机同步子模块概要设计 | 第37-38页 |
| ·Timer 子模块概要设计 | 第38页 |
| ·本章小结 | 第38-39页 |
| 第四章 DPST 算法与 PutOff 算法 | 第39-50页 |
| ·系统基本负载均衡策略 | 第39-40页 |
| ·异构环境下慢任务调度算法 | 第40-45页 |
| ·算法需求背景 | 第40页 |
| ·相关算法 | 第40-42页 |
| ·算法运行基本环境 | 第42页 |
| ·节点能力度量定义 | 第42-43页 |
| ·DPST 算法 | 第43-45页 |
| ·PutOff 调度算法 | 第45-49页 |
| ·算法背景 | 第46-47页 |
| ·算法实现 | 第47-49页 |
| ·本章小结 | 第49-50页 |
| 第五章 中控节点的详细设计与实现 | 第50-77页 |
| ·Master 总体架构 | 第50-51页 |
| ·网络交互子模块设计实现 | 第51-58页 |
| ·Reactor 模式 | 第51-54页 |
| ·epoll 与非阻塞网络通信 | 第54-56页 |
| ·Agent 类 | 第56-57页 |
| ·网络交互子模块事件驱动机制 | 第57-58页 |
| ·任务管理与调度模块设计实现 | 第58-64页 |
| ·Task 与 SubTask | 第58-61页 |
| ·任务管理 | 第61-62页 |
| ·双层调度机制 | 第62-64页 |
| ·负载均衡模块设计实现 | 第64-66页 |
| ·定时器子模块设计实现 | 第66-68页 |
| ·主备机同步子模块设计实现 | 第68-70页 |
| ·基本任务设计实现 | 第70-76页 |
| ·DCTask（数据采集任务） | 第70-71页 |
| ·DSTask（数据汇总任务） | 第71-73页 |
| ·SearchTask（数据查询任务） | 第73-76页 |
| ·本章小结 | 第76-77页 |
| 第六章 系统测试 | 第77-84页 |
| ·测试环境 | 第77-78页 |
| ·基本功能测试 | 第78-81页 |
| ·采集功能 | 第78页 |
| ·汇总功能 | 第78-79页 |
| ·查询功能 | 第79-80页 |
| ·备份功能 | 第80-81页 |
| ·主备机切换 | 第81页 |
| ·性能测试 | 第81-83页 |
| ·本章小结 | 第83-84页 |
| 第七章 总结与展望 | 第84-86页 |
| 致谢 | 第86-87页 |
| 参考文献 | 第87-90页 |
