HAWQ系统中数据读取加速子系统的设计与实现
摘要 | 第5-6页 |
Abstract | 第6页 |
第一章 引言 | 第11-16页 |
1.1 项目背景 | 第11-12页 |
1.2 国内外相关项目发展概况 | 第12-15页 |
1.3 本文主要工作 | 第15页 |
1.4 本文的组织结构 | 第15-16页 |
第二章 相关技术综述 | 第16-30页 |
2.1 SQL on Hadoop介绍 | 第16-19页 |
2.1.1 Hadoop介绍 | 第16-18页 |
2.1.2 SQL on Hadoop | 第18-19页 |
2.2 主要使用技术 | 第19-22页 |
2.2.1 MPP系统架构 | 第19页 |
2.2.2 核心组件 | 第19-20页 |
2.2.3 执行计划 | 第20页 |
2.2.4 优化器 | 第20-21页 |
2.2.5 存储格式 | 第21-22页 |
2.2.6 资源控制 | 第22页 |
2.3 HAWQ系统介绍 | 第22-29页 |
2.3.1 项目架构介绍 | 第22-25页 |
2.3.2 HAWQ查询执行流程 | 第25-29页 |
2.4 本章小结 | 第29-30页 |
第三章 数据读取加速子系统的需求分析 | 第30-39页 |
3.1 系统范围 | 第30-31页 |
3.2 系统功能需求分析 | 第31-37页 |
3.2.1 弹性执行引擎与vseg个数 | 第31-35页 |
3.2.2 数据读取最佳备份 | 第35-37页 |
3.3 系统非功能需求分析 | 第37-38页 |
3.4 本章小结 | 第38-39页 |
第四章 数据读取加速子系统的设计 | 第39-53页 |
4.1 总体设计 | 第39-40页 |
4.2 详细设计 | 第40-52页 |
4.2.1 Segment Policy模块 | 第40-47页 |
4.2.2 Data locality模块 | 第47-50页 |
4.2.3 Metadata Cache模块 | 第50-52页 |
4.3 本章小结 | 第52-53页 |
第五章 数据读取加速子系统的实现 | 第53-72页 |
5.1 实现环境 | 第53页 |
5.2 系统实现 | 第53-65页 |
5.2.1 Segment Policy模块实现 | 第54-57页 |
5.2.2 Data locality模块实现 | 第57-61页 |
5.2.3 Metadata Cache模块实现 | 第61-65页 |
5.3 子系统的测试及结果分析 | 第65-71页 |
5.5 本章小结 | 第71-72页 |
第六章 总结与展望 | 第72-74页 |
6.1 总结 | 第72-73页 |
6.2 存在的问题与进一步工作展望 | 第73-74页 |
参考文献 | 第74-77页 |
致谢 | 第77-78页 |
参与项目 | 第78-80页 |