分布式异构数据源同步框架的研究与实现
摘要 | 第4-5页 |
abstract | 第5页 |
第一章 绪论 | 第8-11页 |
1.1 研究背景与意义 | 第8-9页 |
1.2 目前的现状 | 第9页 |
1.3 主要的研究内容 | 第9-10页 |
1.4 论文的内容与组织 | 第10-11页 |
第二章 数据同步技术的需求分析 | 第11-13页 |
2.1 数据同步的相关概念 | 第11页 |
2.1.1 异构数据源 | 第11页 |
2.1.2 数据同步 | 第11页 |
2.2 数据同步的共性问题 | 第11-12页 |
2.3 本章小结 | 第12-13页 |
第三章 异构数据源同步技术方案 | 第13-17页 |
3.1 同步链路 | 第13-14页 |
3.2 同步工具服务化 | 第14页 |
3.3 分布式 | 第14-15页 |
3.4 运行方式 | 第15-16页 |
3.5 本章小结 | 第16-17页 |
第四章 异构数据源同步框架的实现 | 第17-48页 |
4.1 框架总体设计 | 第17-18页 |
4.2 分布式的实现 | 第18-20页 |
4.2.1 zookeeper介绍 | 第18-19页 |
4.2.2 iLoader分布式实现 | 第19-20页 |
4.3 集群节点间的通信 | 第20-24页 |
4.3.1 Thrift介绍 | 第20-22页 |
4.3.2 iLoader节点之间的通信 | 第22-24页 |
4.4 同步任务 | 第24-42页 |
4.4.1 iLoaderSDK | 第24-30页 |
4.4.2 Job划分 | 第30-36页 |
4.4.3 读写分离 | 第36-37页 |
4.4.4 流转发 | 第37-39页 |
4.4.5 负载均衡 | 第39-42页 |
4.5 缓存组件 | 第42-44页 |
4.5.1 LevelDB介绍 | 第42-43页 |
4.5.2 iLoader缓存和存储 | 第43-44页 |
4.6 可靠性 | 第44-47页 |
4.6.1 ACK机制 | 第44-45页 |
4.6.2 iLoaderACK机制 | 第45-46页 |
4.6.3 Job可靠性 | 第46-47页 |
4.7 本章小结 | 第47-48页 |
第五章 系统验证 | 第48-54页 |
5.1 实验环境 | 第48页 |
5.2 框架性能测试 | 第48-53页 |
5.2.1 单节点服务部署 | 第48-51页 |
5.2.2 多节点服务部署 | 第51-53页 |
5.3 本章小结 | 第53-54页 |
第六章 总结和展望 | 第54-55页 |
6.1 本文主要研究工作总结 | 第54页 |
6.2 展望 | 第54-55页 |
参考文献 | 第55-57页 |
发表论文和科研情况说明 | 第57-58页 |
致谢 | 第58页 |