摘要 | 第5-6页 |
Abstract | 第6页 |
第1章 绪论 | 第9-14页 |
1.1 课题研究背景 | 第9-10页 |
1.2 国内外研究现状 | 第10-12页 |
1.2.1 立方体计算研究现状 | 第11页 |
1.2.2 星型连接研究现状 | 第11-12页 |
1.3 论文研究内容 | 第12-13页 |
1.4 论文组织 | 第13页 |
1.5 本章小结 | 第13-14页 |
第2章 相关技术 | 第14-21页 |
2.1 大数据处理平台 | 第14-17页 |
2.1.1 Hadoop介绍 | 第14-15页 |
2.1.2 Spark介绍 | 第15-17页 |
2.2 数据立方体技术 | 第17-20页 |
2.2.1 数据立方体的概念 | 第17-18页 |
2.2.2 数据立的一种形式化描述 | 第18-19页 |
2.2.3 数据立方体物化 | 第19-20页 |
2.3 本章小结 | 第20-21页 |
第3章 Spark简介 | 第21-29页 |
3.1 Spark体系架构 | 第21-22页 |
3.2 弹性分布式数据集 | 第22-26页 |
3.2.1 RDD弹性分布式数据集 | 第22页 |
3.2.2 RDD创建 | 第22-23页 |
3.2.3 RDD转换操作与行动操作 | 第23-24页 |
3.2.4 RDD的Lineage机制 | 第24-26页 |
3.3 Spark程序模型 | 第26页 |
3.4 Spark工作机制 | 第26-28页 |
3.4.1Spark调度相关基本概念 | 第27页 |
3.4.2 工作原理 | 第27-28页 |
3.5 本章小结 | 第28-29页 |
第4章 Spark平台下数据立方体的快速计算研究 | 第29-41页 |
4.1 数据立方体的计算方法研究 | 第29-35页 |
4.1.1 BUC算法简介 | 第29-32页 |
4.1.2 BUCPark算法的提出 | 第32-33页 |
4.1.3 LBUCPark算法的提出 | 第33-35页 |
4.2 基于Spark的星型连接算法的研究 | 第35-40页 |
4.2.1 星型多维数据模型简介 | 第35-36页 |
4.2.2 BloomFilter算法 | 第36-37页 |
4.2.3 基于多维Bloom Filter的星型连接算法的提出 | 第37-40页 |
4.3 本章小结 | 第40-41页 |
第5章 集群部署与实验 | 第41-49页 |
5.1 Spark集群部署 | 第41-44页 |
5.1.1 安装部署Spark外部依赖 | 第41-42页 |
5.1.2 搭建Hadoop集群 | 第42-43页 |
5.1.3.安装Spark | 第43-44页 |
5.1.4 启动集群 | 第44页 |
5.2 立方体算方法计算性能 | 第44-47页 |
5.3 基于多维Bloom Filter的星型连接算法计算性能 | 第47-48页 |
5.4 本章总结 | 第48-49页 |
第6章 结论与展望 | 第49-50页 |
参考文献 | 第50-54页 |
攻读硕士学位期间发表的论文及其它成果 | 第54-55页 |
致谢 | 第55页 |