电商大数据实时数据看板的设计和实现
摘要 | 第3-4页 |
abstract | 第4-5页 |
1 绪论 | 第9-15页 |
1.1 研究背景与意义 | 第9-10页 |
1.2 国内外研究现状 | 第10-12页 |
1.2.1 关于实时数据的研究 | 第10-11页 |
1.2.2 关于电商数据看板的研究 | 第11-12页 |
1.3 研究目标及内容 | 第12-13页 |
1.3.1 研究目标 | 第12-13页 |
1.3.2 研究内容 | 第13页 |
1.4 论文结构 | 第13-15页 |
2 相关技术分析 | 第15-22页 |
2.1 ETL技术 | 第15-16页 |
2.2 Hadoop框架 | 第16-18页 |
2.2.1 MapReduce工作机制 | 第16-17页 |
2.2.2 分布式文件系统HDFS | 第17页 |
2.2.3 Hive数据仓库 | 第17-18页 |
2.3 实时计算 | 第18-21页 |
2.3.1 Kafka消息机制 | 第18-19页 |
2.3.2 Storm实时计算原理 | 第19-20页 |
2.3.3 Redis和Hbase数据库 | 第20-21页 |
2.4 本章小结 | 第21-22页 |
3 系统需求分析及架构设计 | 第22-32页 |
3.1 系统需求分析 | 第22-29页 |
3.1.1 业务分析 | 第22-24页 |
3.1.2 功能性需求分析 | 第24-28页 |
3.1.3 非功能性需求分析 | 第28-29页 |
3.2 系统架构设计 | 第29-31页 |
3.2.1 逻辑架构 | 第29-30页 |
3.2.2 技术架构 | 第30-31页 |
3.3 本章小结 | 第31-32页 |
4 核心功能的设计与实现 | 第32-57页 |
4.1 运营监控模块设计与实现 | 第32-35页 |
4.1.1 运营监控模块设计 | 第32-34页 |
4.1.2 运营监控模块实现 | 第34-35页 |
4.2 部类看板模块设计与实现 | 第35-38页 |
4.2.1 部类看板模块设计 | 第35-36页 |
4.2.2 部类看板模块实现 | 第36-38页 |
4.3 档期看板模块设计与实现 | 第38-40页 |
4.3.1 档期看板模块的设计 | 第38-39页 |
4.3.2 档期看板模块的实现 | 第39-40页 |
4.4 预热看板模块设计与实现 | 第40-43页 |
4.4.1 预热看板模块设计 | 第41页 |
4.4.2 预热看板模块实现 | 第41-43页 |
4.5 预付看板模块设计 | 第43-46页 |
4.5.1 预付看板模块设计 | 第43-45页 |
4.5.2 预付看板模块实现 | 第45-46页 |
4.6 数据对比模块设计与实现 | 第46-47页 |
4.6.1 数据对比模块设计 | 第46页 |
4.6.2 数据对比模块实现 | 第46-47页 |
4.7 实时数据处理架构设计和实现 | 第47-56页 |
4.7.1 实时数据处理架构模板设计 | 第47-48页 |
4.7.2 回购总体架构设计和实现 | 第48-51页 |
4.7.3 收藏人次总体架构和实现 | 第51-55页 |
4.7.4 回访数据以及UV计算的设计实现 | 第55-56页 |
4.8 本章小结 | 第56-57页 |
5 系统测试与应用 | 第57-65页 |
5.1 系统测试 | 第57-60页 |
5.1.1 功能测试 | 第57-58页 |
5.1.2 性能测试 | 第58-60页 |
5.2 系统运用与效果 | 第60-64页 |
5.2.1 系统运用 | 第60-64页 |
5.2.2 效果分析 | 第64页 |
5.3 本章小结 | 第64-65页 |
6 结论 | 第65-67页 |
参考文献 | 第67-69页 |
致谢 | 第69-70页 |
攻读学位期间发表的学术论文目录 | 第70-72页 |