基于Spark的产后访视系统的设计与实现
摘要 | 第5-6页 |
abstract | 第6-7页 |
第一章 绪论 | 第11-16页 |
1.1 研究背景与意义 | 第11-12页 |
1.2 国内外研究现状 | 第12-14页 |
1.3 论文主要工作 | 第14页 |
1.4 论文结构安排 | 第14-16页 |
第二章 系统相关技术 | 第16-27页 |
2.1 JAKARTAEE | 第16-18页 |
2.2 HADOOP生态系统 | 第18-24页 |
2.2.1 HADOOP技术架构 | 第18-21页 |
2.2.2 SPARK技术栈 | 第21-23页 |
2.2.3 日志采集与传输 | 第23-24页 |
2.3 RPC远程过程调用 | 第24-26页 |
2.4 分布式流处理 | 第26页 |
2.5 本章小结 | 第26-27页 |
第三章 系统需求分析与设计 | 第27-52页 |
3.1 功能性需求 | 第27-31页 |
3.1.1 系统用例分析 | 第27-28页 |
3.1.2 访视信息采集需求 | 第28-29页 |
3.1.3 统计分析与挖掘 | 第29-31页 |
3.2 非功能性需求 | 第31-33页 |
3.2.1 性能需求 | 第31-32页 |
3.2.2 安全性 | 第32页 |
3.2.3 可行性分析 | 第32页 |
3.2.4 设计约束 | 第32-33页 |
3.3 总体架构设计 | 第33-35页 |
3.3.1 功能架构设计 | 第33-34页 |
3.3.2 技术架构设计 | 第34-35页 |
3.3.3 网络架构设计 | 第35页 |
3.4 数据库设计 | 第35-38页 |
3.4.1 概念设计 | 第35-36页 |
3.4.2 表结构设计 | 第36-38页 |
3.5 详细设计 | 第38-51页 |
3.5.1 产后访视的信息采集 | 第38-40页 |
3.5.2 请求拦截及登录 | 第40-41页 |
3.5.3 数据同步设计 | 第41-42页 |
3.5.4 访视扫码设计 | 第42-43页 |
3.5.5 分布式下业务数据处理 | 第43-46页 |
3.5.6 模拟数据的生成 | 第46页 |
3.5.7 访视数据的统计分析与挖掘 | 第46-51页 |
3.6 本章小结 | 第51-52页 |
第四章 系统实现 | 第52-81页 |
4.1 访视系统原型的实现 | 第52-54页 |
4.1.1 搭建大数据分析平台 | 第52-53页 |
4.1.2 具体部署说明 | 第53-54页 |
4.2 HA实现以及性能优化 | 第54-64页 |
4.2.1 主从切换 | 第54-56页 |
4.2.2 负载均衡 | 第56-57页 |
4.2.3 配置项与算子的优化 | 第57-63页 |
4.2.4 数据倾斜问题的解决 | 第63-64页 |
4.3 功能点实现 | 第64-79页 |
4.3.1 访视信息采集 | 第64-68页 |
4.3.2 离线批处理 | 第68-72页 |
4.3.3 实时流计算 | 第72-76页 |
4.3.4 访视数据的挖掘 | 第76-79页 |
4.4 本章小结 | 第79-81页 |
第五章 系统的测试与分析 | 第81-92页 |
5.1 测试环境 | 第81-82页 |
5.2 功能测试 | 第82-88页 |
5.3 性能测试 | 第88-91页 |
5.4 本章小结 | 第91-92页 |
第六章 总结与展望 | 第92-94页 |
6.1 全文总结 | 第92页 |
6.2 后续工作展望 | 第92-94页 |
致谢 | 第94-95页 |
参考文献 | 第95-96页 |