摘要 | 第1-5页 |
ABSTRACT | 第5-12页 |
第1章 引言 | 第12-23页 |
·课题背景及意义 | 第12-13页 |
·国内外研究现状 | 第13-18页 |
·MPP分析型关系数据库 | 第13-15页 |
·新兴的分布式计算平台融合SQL查询接口 | 第15-17页 |
·本节小结 | 第17-18页 |
·本文工作 | 第18-19页 |
·本文贡献 | 第19-21页 |
·论文结构 | 第21-23页 |
第2章 相关技术介绍 | 第23-36页 |
·PostgreSQL数据库 | 第23-25页 |
·基于C语言功能扩展 | 第23-24页 |
·基于C语言扩展实例 | 第24-25页 |
·Spark分布式计算引擎 | 第25-27页 |
·Spark生态圈 | 第25-26页 |
·Spark运行框架 | 第26-27页 |
·跨语言平台通信技术 | 第27-31页 |
·Thrift框架 | 第27-28页 |
·Thrift框架应用实例 | 第28-31页 |
·跨平台数据传输技术 | 第31-35页 |
·Socket网络传输 | 第31-32页 |
·ZeroMQ消息队列 | 第32-33页 |
·Sqoop大数据传输 | 第33-35页 |
·本章小结 | 第35-36页 |
第3章 基于PostgreSQL和Spark的可扩展大数据分析平台 | 第36-53页 |
·基于PostgtreSQL和Spark可扩展大数据分析平台结构设计 | 第36-39页 |
·PostgreSQL宿主端 | 第39-40页 |
·Spark扩展端 | 第40-41页 |
·Dex中间件 | 第41-47页 |
·Dex客户端 | 第43-46页 |
·Dex服务端 | 第46-47页 |
·PSS平台性能分析 | 第47-51页 |
·实验数据来源 | 第47页 |
·实验过程与结果分析 | 第47-51页 |
·本章小结 | 第51-53页 |
第4章 基于DexRDD的数据传输优化 | 第53-66页 |
·RDD简介 | 第53-57页 |
·RDD的内部属性 | 第54-56页 |
·RDD生成方案 | 第56-57页 |
·Dex RDD生成方案 | 第57-63页 |
·Block元数据块 | 第59页 |
·Dex RDD的实现 | 第59-63页 |
·Dex RDD性能分析 | 第63-64页 |
·本章小结 | 第64-66页 |
第5章 基于PSS平台的实时交通路况预测系统 | 第66-76页 |
·基于PSS平台的实时交通路况预测系统框架 | 第66-71页 |
·实时接收模块 | 第67页 |
·多线程并发预处理模块 | 第67-68页 |
·地图匹配模块 | 第68页 |
·路况预测模型 | 第68-71页 |
·系统实验及结果分析 | 第71-74页 |
·实验数据来源 | 第71-72页 |
·实验结果分析 | 第72-74页 |
·本章小结 | 第74-76页 |
第6章 总结与展望 | 第76-79页 |
·本文工作总结 | 第76-77页 |
·下一步研究方向 | 第77-79页 |
参考文献 | 第79-82页 |
致谢 | 第82-83页 |
作者简介 | 第83页 |