摘要 | 第4-5页 |
Abstract | 第5-6页 |
第1章 绪论 | 第14-17页 |
1.1 课题背景 | 第14页 |
1.2 发展现状 | 第14-15页 |
1.3 本文主要工作 | 第15-16页 |
1.4 论文结构 | 第16页 |
1.5 本章小结 | 第16-17页 |
第2章 相关技术 | 第17-21页 |
2.1 引言 | 第17页 |
2.2 Zookeeper | 第17页 |
2.3 Protocol Buffer | 第17-18页 |
2.4 Snappy | 第18页 |
2.5 Netty | 第18-19页 |
2.6 Jetty | 第19页 |
2.7 Fast JSON | 第19-20页 |
2.8 Spring | 第20页 |
2.9 本章小结 | 第20-21页 |
第3章 数据同步系统设计 | 第21-38页 |
3.1 引言 | 第21页 |
3.2 数据同步系统 | 第21-24页 |
3.2.1 系统定义 | 第21-22页 |
3.2.2 工作过程 | 第22-23页 |
3.2.3 质量属性 | 第23-24页 |
3.3 数据同步系统设计 | 第24-37页 |
3.3.1 JTangSync总体设计 | 第24-27页 |
3.3.2 JTangSync数据源模块设计 | 第27-32页 |
3.3.3 JTangSync数据传输模块设计 | 第32-34页 |
3.3.4 JTangSync数据处理模块设计 | 第34-36页 |
3.3.5 JTangSync用户接口设计 | 第36页 |
3.3.6 JTangSync集群模块设计 | 第36-37页 |
3.4 本章小结 | 第37-38页 |
第4章 JTangSync节点实现 | 第38-53页 |
4.1 引言 | 第38页 |
4.2 数据源实现 | 第38-42页 |
4.2.1 Mysql增量数据源实现 | 第38-40页 |
4.2.2 Sqlserver增量数据源实现 | 第40-42页 |
4.3 数据传输实现 | 第42-43页 |
4.3.1 基于netty的实现 | 第42页 |
4.3.2 自适应压缩算法 | 第42-43页 |
4.4 数据处理器实现 | 第43-45页 |
4.4.1 过滤处理器 | 第43页 |
4.4.2 合并处理器 | 第43-44页 |
4.4.3 拆分处理器 | 第44页 |
4.4.4 数据库处理器 | 第44-45页 |
4.5 用户接口实现 | 第45-47页 |
4.5.1 JTangSync监控管理平台实现 | 第45-46页 |
4.5.2 开发接口实现 | 第46-47页 |
4.6 其他关键技术实现 | 第47-52页 |
4.6.1 JTangSync的断点续传解决方案 | 第47-49页 |
4.6.2 JTangSync的数据库数据循环解决方案 | 第49-52页 |
4.7 本章小结 | 第52-53页 |
第5章 JTangSync集群实现 | 第53-71页 |
5.1 引言 | 第53页 |
5.2 JTangSync节点控制 | 第53-60页 |
5.2.1 Paxos算法和zookeeper | 第53-54页 |
5.2.2 Manager选举算法 | 第54-56页 |
5.2.3 节点热部署 | 第56-57页 |
5.2.4 节点热移除 | 第57-58页 |
5.2.5 节点间的通信 | 第58-59页 |
5.2.6 节点其他操作 | 第59-60页 |
5.3 JTangSync调度算法 | 第60-61页 |
5.3.1 轮询算法 | 第60页 |
5.3.2 加权轮询算法 | 第60页 |
5.3.3 哈希算法 | 第60页 |
5.3.4 最少实例算法 | 第60-61页 |
5.3.5 加权最少实例算法 | 第61页 |
5.4 JTangSync故障转移 | 第61-67页 |
5.4.1 故障分类 | 第61页 |
5.4.2 同步实例故障处理 | 第61-64页 |
5.4.3 节点故障处理 | 第64-67页 |
5.5 JTangSync配置管理 | 第67-70页 |
5.5.1 Zookeeper文件系统 | 第67-69页 |
5.5.2 分布式配置管理 | 第69-70页 |
5.6 本章小结 | 第70-71页 |
第6章 JTangSync系统测试与应用 | 第71-86页 |
6.1 引言 | 第71页 |
6.2 测试环境 | 第71-72页 |
6.3 使用场景 | 第72-75页 |
6.3.1 与传统的数据同步比较 | 第72-73页 |
6.3.2 JTangSync的典型应用场景 | 第73-75页 |
6.4 测试内容 | 第75-85页 |
6.4.1 可用性 | 第75-78页 |
6.4.2 功能测试 | 第78-79页 |
6.4.3 性能测试 | 第79-81页 |
6.4.4 性能比较 | 第81-85页 |
6.5 本章小结 | 第85-86页 |
第7章 总结与展望 | 第86-87页 |
7.1 总结 | 第86页 |
7.2 展望 | 第86-87页 |
参考文献 | 第87-89页 |
攻读硕士学位期间主要的研究成果 | 第89-90页 |
致谢 | 第90页 |