千亿级智能交通大数据存储与检索系统的研究
| 摘要 | 第5-6页 |
| ABSTRACT | 第6页 |
| 第1章 绪论 | 第9-14页 |
| 1.1 研究背景和意义 | 第9页 |
| 1.2 智能交通及相关技术国内外发展现状 | 第9-12页 |
| 1.2.1 智能交通及相关技术国外发展现状 | 第9-11页 |
| 1.2.2 智能交通及相关技术国内发展现况 | 第11-12页 |
| 1.3 大数据技术在智能交通中的作用 | 第12页 |
| 1.4 论文内容及结构 | 第12-14页 |
| 第2章 系统总体设计 | 第14-31页 |
| 2.1 系统需求分析 | 第14-15页 |
| 2.2 系统集群稳定性实现 | 第15-20页 |
| 2.2.1 Zookeeper简介 | 第15-16页 |
| 2.2.2 虚拟IP技术 | 第16-17页 |
| 2.2.3 集群负载均衡实现 | 第17-18页 |
| 2.2.4 集群高可用性实现 | 第18-20页 |
| 2.3 系统整体架构设计 | 第20-30页 |
| 2.3.1 系统底层架构 | 第20-22页 |
| 2.3.2 系统对外接口设计 | 第22-25页 |
| 2.3.3 海量数据存储及检索分析 | 第25-29页 |
| 2.3.4 系统整体架构实现 | 第29-30页 |
| 2.4 本章小结 | 第30-31页 |
| 第3章 流式数据存储及索引 | 第31-45页 |
| 3.1 数据插入流程 | 第31页 |
| 3.2 实时数据缓存设计 | 第31-38页 |
| 3.2.1 消息队列简介 | 第32-33页 |
| 3.2.2 流式计算框架简介 | 第33-34页 |
| 3.2.3 实时数据缓存实现 | 第34-38页 |
| 3.3 数据存储及索引 | 第38-44页 |
| 3.3.1 数据库表结构设计 | 第38-39页 |
| 3.3.2 Solr配置 | 第39-41页 |
| 3.3.3 Solr分Core算法设计 | 第41-42页 |
| 3.3.4 数据存储及索引整体流程 | 第42-44页 |
| 3.4 本章小结 | 第44-45页 |
| 第4章 千亿数据检索设计 | 第45-53页 |
| 4.1 系统总体查询流程 | 第45-48页 |
| 4.1.1 查询条件解析 | 第45-47页 |
| 4.1.2 索引及元数据的获取 | 第47-48页 |
| 4.2 时间紧缩算法设计 | 第48-51页 |
| 4.2.1 变量定义 | 第49页 |
| 4.2.2 统计量 | 第49-50页 |
| 4.2.3 时间紧缩算法实现 | 第50-51页 |
| 4.3 翻页缓存设计 | 第51-52页 |
| 4.4 本章小结 | 第52-53页 |
| 第5章 系统环境搭建及性能测试 | 第53-58页 |
| 5.1 测试环境 | 第53-54页 |
| 5.2 索引吞吐量测试 | 第54-55页 |
| 5.3 时间紧缩算法测试 | 第55-56页 |
| 5.4 千亿数据查询速度测试 | 第56页 |
| 5.5 查询准确率测试 | 第56-57页 |
| 5.6 本章小结 | 第57-58页 |
| 第6章 总结与展望 | 第58-60页 |
| 6.1 总结 | 第58页 |
| 6.2 展望 | 第58-60页 |
| 致谢 | 第60-61页 |
| 参考文献 | 第61-64页 |
| 附录 | 第64页 |
