摘要 | 第5-6页 |
Abstract | 第6-7页 |
第1章 绪论 | 第11-19页 |
1.1 研究背景及问题提出 | 第11-12页 |
1.2 国内外研究现状 | 第12-15页 |
1.3 本文主要工作 | 第15-16页 |
1.4 本文组织结构 | 第16-19页 |
第2章 相关理论及技术 | 第19-33页 |
2.1 数据仓库技术 | 第19-21页 |
2.1.1 数据仓库定义 | 第19页 |
2.1.2 数据仓库体系结构 | 第19-20页 |
2.1.3 数据仓库模型 | 第20-21页 |
2.2 Hadoop平台架构 | 第21-23页 |
2.2.1 Hadoop平台简介 | 第21页 |
2.2.2 分布式文件系统HDFS | 第21-22页 |
2.2.3 MapReduce编程模型 | 第22-23页 |
2.3 并行数据库和MapReduce的混合架构 | 第23-26页 |
2.3.1 HadoopDB简介 | 第24-25页 |
2.3.2 Hive简介 | 第25-26页 |
2.4 开源数据库PostgreSQL简介 | 第26-28页 |
2.4.1 PostgreSQL介绍 | 第26-27页 |
2.4.2 PostgreSQL架构 | 第27-28页 |
2.5 并行数据仓库GridSQL简介 | 第28-29页 |
2.5.1 GridSQL介绍 | 第28页 |
2.5.2 GridSQL架构 | 第28-29页 |
2.6 基于MapReduce的并行化关系运算 | 第29-32页 |
2.6.1 选择和投影运算 | 第29-30页 |
2.6.2 聚集运算 | 第30-31页 |
2.6.3 连接运算 | 第31-32页 |
2.7 本章小结 | 第32-33页 |
第3章 DMDWH系统的总体设计 | 第33-47页 |
3.1 系统总体架构 | 第33-34页 |
3.2 DMDWH客户端 | 第34页 |
3.3 DMDWH元数据库 | 第34-37页 |
3.4 DMDWH查询引擎 | 第37-41页 |
3.4.1 查询编译模块 | 第37页 |
3.4.2 查询优化模块 | 第37-38页 |
3.4.3 查询计划的生成与执行模块 | 第38-41页 |
3.4.4 节点监控与负载均衡模块 | 第41页 |
3.5 Hadoop集群扩展 | 第41-43页 |
3.5.1 PostgreSQL集群 | 第41-42页 |
3.5.2 存储层扩展 | 第42-43页 |
3.6 数据加载器 | 第43-45页 |
3.7 与Hive、HadoopDB查询执行引擎的比较 | 第45-46页 |
3.8 本章小结 | 第46-47页 |
第4章 DMDWH系统存储模型的设计 | 第47-55页 |
4.1 数据存储模型 | 第47页 |
4.2 表的全复制存储策略 | 第47-48页 |
4.3 表的独立水平划分策略 | 第48-49页 |
4.4 表的联合水平划分策略 | 第49-51页 |
4.5 数据表的数据读取方式 | 第51-52页 |
4.6 数据表的数据分布策略 | 第52-54页 |
4.6.1 Hash分布 | 第52页 |
4.6.2 Range-Partition分布 | 第52页 |
4.6.3 Round-Robin分布 | 第52-53页 |
4.6.4 Hybrid-Range-Round分布 | 第53-54页 |
4.7 本章小结 | 第54-55页 |
第5章 DMDWH系统的查询模型 | 第55-63页 |
5.1 查询语言 | 第55-56页 |
5.1.1 DDL语句 | 第55页 |
5.1.2 DML语句 | 第55-56页 |
5.2 查询执行 | 第56-58页 |
5.3 作业调度算法 | 第58-59页 |
5.4 表的连接算法和聚集算法 | 第59-60页 |
5.5 容错支持和可扩展性 | 第60-61页 |
5.6 本章小结 | 第61-63页 |
第6章 实验与评估 | 第63-73页 |
6.1 系统部署 | 第63-64页 |
6.1.1 软、硬件环境 | 第63-64页 |
6.1.2 部署方案 | 第64页 |
6.1.3 实验的数据环境 | 第64页 |
6.2 数据加载测试 | 第64-66页 |
6.3 选择任务 | 第66-67页 |
6.4 聚集任务 | 第67-69页 |
6.5 连接任务 | 第69-70页 |
6.6 集群规模影响 | 第70-71页 |
6.7 容错性分析 | 第71-72页 |
6.8 本章小结 | 第72-73页 |
第7章 总结与未来展望 | 第73-77页 |
7.1 本文的贡献 | 第73-74页 |
7.2 不足及未来工作展望 | 第74-77页 |
参考文献 | 第77-81页 |
致谢 | 第81-83页 |
攻硕期间发表的论文及参加的项目 | 第83页 |