摘要 | 第4-5页 |
ABSTRACT | 第5-6页 |
第一章 绪论 | 第10-14页 |
1.1 研究背景 | 第10-11页 |
1.2 研究内容 | 第11-12页 |
1.3 论文结构 | 第12-14页 |
第二章 相关技术综述 | 第14-30页 |
2.1 批处理 | 第14-18页 |
2.1.1 Hadoop | 第14-16页 |
2.1.2 Spark | 第16-18页 |
2.2 工作流引擎 | 第18-19页 |
2.3 实时处理 | 第19-23页 |
2.3.1 Storm | 第19-21页 |
2.3.2 Kafka | 第21-23页 |
2.4 NoSQL存储 | 第23-26页 |
2.4.1 Redis | 第23-24页 |
2.4.2 MongoDB | 第24-25页 |
2.4.3 NoSQL小结 | 第25-26页 |
2.5 前端技术 | 第26-28页 |
2.5.1 Node.js | 第26-27页 |
2.5.2 WebSocket | 第27-28页 |
2.6 本章小结 | 第28-30页 |
第三章 大数据分析平台架构研究 | 第30-41页 |
3.1 总体架构 | 第30-31页 |
3.2 数据源 | 第31-32页 |
3.3 数据吸收层 | 第32-34页 |
3.4 数据存储层 | 第34-36页 |
3.5 大数据平台层 | 第36-38页 |
3.6 安全与监控层 | 第38-39页 |
3.7 设备层 | 第39页 |
3.8 应用层 | 第39-40页 |
3.9 本章小结 | 第40-41页 |
第四章 基于Hadoop和Storm的大数据分析平台的设计 | 第41-53页 |
4.1 应用架构设计 | 第41-46页 |
4.1.1 UI层 | 第42-43页 |
4.1.2 Web服务层 | 第43-44页 |
4.1.3 基础平台层 | 第44页 |
4.1.4 应用存储层 | 第44-45页 |
4.1.5 服务拓展和应用拓展 | 第45-46页 |
4.2 功能模块设计 | 第46-52页 |
4.2.1 基础功能模块 | 第46-47页 |
4.2.2 用户管理 | 第47-48页 |
4.2.3 数据管理 | 第48页 |
4.2.4 工作流引擎 | 第48-49页 |
4.2.5 数据交换 | 第49-50页 |
4.2.6 Storm实时监控 | 第50-52页 |
4.3 本章小结 | 第52-53页 |
第五章 基于Hadoop和Storm的大数据分析平台的实现 | 第53-79页 |
5.1 应用架构实现 | 第53-57页 |
5.1.1 UI层 | 第53-54页 |
5.1.2 Web服务层 | 第54-55页 |
5.1.3 基础平台层 | 第55-57页 |
5.2 功能模块实现 | 第57-78页 |
5.2.1 基础功能模块 | 第57-61页 |
5.2.2 用户管理 | 第61-65页 |
5.2.3 数据管理 | 第65-67页 |
5.2.4 工作流引擎 | 第67-69页 |
5.2.5 数据交换 | 第69-72页 |
5.2.6 Storm实时监控 | 第72-78页 |
5.3 本章小结 | 第78-79页 |
第六章 测试与验证 | 第79-97页 |
6.1 测试环境 | 第79-80页 |
6.2 功能内容 | 第80-96页 |
6.2.1 REST接口 | 第80-81页 |
6.2.2 用户登录登出 | 第81页 |
6.2.3 用户管理 | 第81-82页 |
6.2.4 数据管理 | 第82-86页 |
6.2.5 工作流 | 第86-89页 |
6.2.6 数据交换 | 第89-92页 |
6.2.7 Storm实时监控 | 第92-96页 |
6.3 本章小结 | 第96-97页 |
第七章 总结和展望 | 第97-99页 |
7.1 论文总结 | 第97页 |
7.2 研究展望 | 第97-99页 |
参考文献 | 第99-101页 |
致谢 | 第101-102页 |
攻读硕士研究生期间发表的论文 | 第102页 |