WIFI围栏大数据分析系统混合数据存储模型的研究与实现
| 摘要 | 第4-5页 |
| ABSTRACT | 第5-6页 |
| 第一章 绪论 | 第9-14页 |
| 1.1 研究背景 | 第9-10页 |
| 1.2 国内外研究现状 | 第10-12页 |
| 1.3 研究内容 | 第12-13页 |
| 1.4 论文篇章结构 | 第13页 |
| 1.5 本章小结 | 第13-14页 |
| 第二章 数据存储模型的研究 | 第14-31页 |
| 2.1 WIFI围栏数据特征分析 | 第14-17页 |
| 2.1.1 数据来源 | 第14页 |
| 2.1.2 采集数据格式 | 第14-16页 |
| 2.1.3 数据量统计 | 第16-17页 |
| 2.2 关系型数据库 | 第17-20页 |
| 2.2.1 数据库系统的衍变 | 第17-18页 |
| 2.2.2 OldSQL数据库 | 第18-19页 |
| 2.2.3 NewSQL数据库 | 第19-20页 |
| 2.3 NoSQL数据库 | 第20-23页 |
| 2.3.1 键值(Key/Value)存储数据库 | 第21页 |
| 2.3.2 列存储数据库 | 第21-22页 |
| 2.3.3 文档型数据库 | 第22页 |
| 2.3.4 图形(Graph)数据库 | 第22-23页 |
| 2.4 数据存储模型 | 第23-27页 |
| 2.5 具体数据库的选型 | 第27-29页 |
| 2.6 本章小结 | 第29-31页 |
| 第三章 系统数据存储层的需求分析 | 第31-37页 |
| 3.1 系统概述 | 第31页 |
| 3.2 数据存储层的功能性需求 | 第31-35页 |
| 3.3 数据存储层的非功能性需求 | 第35-36页 |
| 3.3.1 高效性需求 | 第35页 |
| 3.3.2 可靠性需求 | 第35页 |
| 3.3.3 可扩展性需求 | 第35-36页 |
| 3.3.4 存储量需求 | 第36页 |
| 3.4 本章小结 | 第36-37页 |
| 第四章 系统数据存储层的架构设计 | 第37-52页 |
| 4.1 关键问题的解决思路 | 第37-43页 |
| 4.1.1 HDFS的小文件合并问题 | 第37-39页 |
| 4.1.2 HBase表的设计问题 | 第39-41页 |
| 4.1.3 HBase的高效查询问题 | 第41-43页 |
| 4.2 设计方案 | 第43-51页 |
| 4.2.1 MySQL | 第44-48页 |
| 4.2.2 HDFS | 第48-49页 |
| 4.2.3 HBase | 第49-51页 |
| 4.2.4 Redis | 第51页 |
| 4.3 本章小结 | 第51-52页 |
| 第五章 系统数据存储层的实现 | 第52-64页 |
| 5.1 数据传递接口的实现 | 第52-56页 |
| 5.1.1 分发服务器→HDFS | 第53-54页 |
| 5.1.2 HDFS→HBase | 第54页 |
| 5.1.3 HDFS→MySQL | 第54-55页 |
| 5.1.4 HDFS→Redis | 第55页 |
| 5.1.5 Redis→MySQL | 第55-56页 |
| 5.1.6 其它处理过程 | 第56页 |
| 5.2 性能分析 | 第56-58页 |
| 5.2.1 数据存储性能分析 | 第56-57页 |
| 5.2.2 数据查询性能分析 | 第57-58页 |
| 5.3 稳定性保障机制 | 第58-63页 |
| 5.3.1 数据处理环节的稳定性保障 | 第58-61页 |
| 5.3.2 Redis的稳定性保障 | 第61-62页 |
| 5.3.3 其它数据库的稳定性保障 | 第62-63页 |
| 5.4 本章小结 | 第63-64页 |
| 第六章 总结及展望 | 第64-66页 |
| 6.1 论文工作总结 | 第64页 |
| 6.2 展望 | 第64-66页 |
| 参考文献 | 第66-68页 |
| 致谢 | 第68-69页 |
| 攻读学位期间发表的学术论文 | 第69页 |
