分布式数据处理系统中配置及任务管理模块的设计与实现
| 摘要 | 第1-5页 |
| ABSTRACT | 第5-7页 |
| 主要符号表 | 第7-10页 |
| 第一章 引言 | 第10-15页 |
| ·研究背景 | 第10-11页 |
| ·海量数据处理的研究现状 | 第11-13页 |
| ·MapReduce | 第11页 |
| · | 第11页 |
| · | 第11-12页 |
| ·S4 | 第12-13页 |
| ·本文的工作 | 第13-15页 |
| 第二章 需求分析 | 第15-17页 |
| 第三章 系统概要设计 | 第17-28页 |
| ·系统功能介绍 | 第17-18页 |
| ·系统架构 | 第18-19页 |
| ·网元的属性 | 第19页 |
| ·网元类型 | 第19页 |
| ·网元版本 | 第19页 |
| ·网元的数据定义方式 | 第19-20页 |
| ·任务的划分 | 第20页 |
| ·存储模型 | 第20-24页 |
| ·持久层架构 | 第20-21页 |
| ·数据操作权限设定 | 第21-22页 |
| ·数据库分表策略 | 第22-23页 |
| ·数据库表命名规则 | 第23-24页 |
| ·数据定位策略 | 第24-25页 |
| ·双机容灾策略 | 第25-27页 |
| ·本章小结 | 第27-28页 |
| 第四章 模块详细设计 | 第28-59页 |
| ·通信协议 | 第28-29页 |
| ·CS 内部模块构成 | 第29-38页 |
| ·驱动模块 | 第29-30页 |
| ·通信模块 | 第30-33页 |
| ·定时器模块 | 第33-34页 |
| ·线程管理模块 | 第34-35页 |
| ·数据库操作模块 | 第35-36页 |
| ·任务管理模块 | 第36页 |
| ·双机热备模块 | 第36-37页 |
| ·任务同步模块 | 第37页 |
| ·业务日志模块 | 第37-38页 |
| ·Task 与 Agent 的关系 | 第38页 |
| ·集中式配置管理的设计 | 第38-41页 |
| ·配置管理框架 | 第38-39页 |
| ·配置数据分类 | 第39-40页 |
| ·配置管理策略 | 第40-41页 |
| ·任务触发和管理模式的设计 | 第41-50页 |
| ·汇总任务的层级触发管理模式 | 第41-44页 |
| ·数据查询任务的游标流水线管理模式 | 第44-49页 |
| ·计划任务的管理模式 | 第49-50页 |
| ·关键数据表设计 | 第50-58页 |
| ·配置相关数据表 | 第50-52页 |
| ·任务相关数据表 | 第52-56页 |
| ·业务日志数据表 | 第56-58页 |
| ·本章小结 | 第58-59页 |
| 第五章 系统实现 | 第59-70页 |
| ·内部框架实现 | 第59页 |
| ·核心模块实现 | 第59-69页 |
| ·通信模块 | 第59-61页 |
| ·定时器模块 | 第61-63页 |
| ·任务模块 | 第63-67页 |
| ·业务日志模块 | 第67-68页 |
| ·双机热备模块 | 第68-69页 |
| ·本章小结 | 第69-70页 |
| 第六章 测试 | 第70-76页 |
| ·测试环境 | 第70页 |
| ·功能测试 | 第70-73页 |
| ·数据采集 | 第70-71页 |
| ·数据汇总 | 第71-72页 |
| ·数据查询 | 第72-73页 |
| ·压力测试 | 第73-75页 |
| ·数据采集压力测试 | 第73页 |
| ·数据汇总压力测试 | 第73-74页 |
| ·数据查询压力测试 | 第74-75页 |
| ·本章小结 | 第75-76页 |
| 总结 | 第76-77页 |
| 致谢 | 第77-78页 |
| 参考文献 | 第78-81页 |
