摘要 | 第5-6页 |
abstract | 第6-7页 |
第一章 绪论 | 第11-16页 |
1.1 研究工作的背景及意义 | 第11-12页 |
1.2 国内外研究历史及现状 | 第12-14页 |
1.3 本文的主要贡献与创新 | 第14-15页 |
1.4 本论文的结构安排 | 第15-16页 |
第二章 典型系统与相关理论基础 | 第16-26页 |
2.1 分布式数据库系统概述 | 第16页 |
2.2 数据库查询引擎模型概述 | 第16-18页 |
2.3 查询引擎关键物理算子算法 | 第18-23页 |
2.3.1 交、并、差运算 | 第18页 |
2.3.2 分组聚合运算 | 第18-19页 |
2.3.3 排序运算 | 第19-20页 |
2.3.4 连接运算 | 第20-23页 |
2.3.4.1 NestLoopJoin | 第20-21页 |
2.3.4.2 MergeJoin | 第21-23页 |
2.3.4.3 HashJoin | 第23页 |
2.4 分布式系统数据分发方式 | 第23-25页 |
2.4.1 SingleDistribution | 第24页 |
2.4.2 HashDistribution | 第24-25页 |
2.4.3 OrderedDistribution | 第25页 |
2.5 本章小结 | 第25-26页 |
第三章 系统概述与总体设计 | 第26-32页 |
3.1 系统背景概述 | 第26-27页 |
3.1.1 系统背景 | 第26-27页 |
3.1.2 系统设计目标 | 第27页 |
3.2 数据库整体架构设计 | 第27-29页 |
3.2.1 数据导入子系统DS | 第28页 |
3.2.2 域控制器DC | 第28页 |
3.2.3 存储引擎CS | 第28-29页 |
3.2.4 查询引擎QE | 第29页 |
3.3 查询引擎架构设计 | 第29-31页 |
3.3.1 查询引擎内部模块 | 第29-30页 |
3.3.2 查询在系统模块间的流程 | 第30-31页 |
3.3.3 查询在查询引擎的流程 | 第31页 |
3.6 本章小结 | 第31-32页 |
第四章 分布式内存数据库查询引擎加速方法的设计 | 第32-45页 |
4.1 关键数据结构的设计 | 第32-40页 |
4.1.1 基于内存的纯列式数据存储格式设计 | 第32-35页 |
4.1.2 基于内存的行列混合式数据存储格式设计 | 第35页 |
4.1.3 查询引擎中间数据格式设计 | 第35-40页 |
4.1.3.1 列式数据集格式 | 第36-38页 |
4.1.3.2 数据类型集格式 | 第38-39页 |
4.1.3.3 行号关系集格式 | 第39-40页 |
4.2 查询引擎数据分发方案设计 | 第40-43页 |
4.2.1 GetColumn算子分发方案 | 第40-41页 |
4.2.2 Filter算子分发方案 | 第41-42页 |
4.2.3 Join算子分发方案 | 第42-43页 |
4.3 本章小结 | 第43-45页 |
第五章 分布式内存数据库查询引擎加速方法的实现 | 第45-67页 |
5.1 相关工具框架的详细设计与实现 | 第45-49页 |
5.1.1 网络通信框架 | 第45-48页 |
5.1.2 任务执行框架 | 第48-49页 |
5.2 查询引擎关键数据结构的实现 | 第49-52页 |
5.2.1 算子执行中间数据结构的实现 | 第50页 |
5.2.2 列式分片数据结构的实现 | 第50-51页 |
5.2.3 单行KV对数据结构的实现 | 第51-52页 |
5.2.4 关键数据结构关系 | 第52页 |
5.3 数据分发方案的实现 | 第52-54页 |
5.4 关键物理算子功能的设计与实现 | 第54-66页 |
5.4.1 获取原始数据功能 | 第54页 |
5.4.2 升序降序功能 | 第54-58页 |
5.4.3 交并过滤功能 | 第58-60页 |
5.4.4 多表连接功能 | 第60-62页 |
5.4.5 分组聚合功能 | 第62-64页 |
5.4.6 生成计算结果功能 | 第64-66页 |
5.5 本章小结 | 第66-67页 |
第六章 测试与分析 | 第67-86页 |
6.1 测试环境 | 第67-68页 |
6.1.1 硬件环境 | 第67-68页 |
6.1.2 系统部署 | 第68页 |
6.2 功能测试 | 第68-75页 |
6.2.1 全表扫描功能测试 | 第68-69页 |
6.2.2 范围查询功能测试 | 第69-70页 |
6.2.3 选择性过滤功能测试I | 第70-71页 |
6.2.4 选择性过滤功能测试II | 第71页 |
6.2.5 选择性过滤功能测试III | 第71-72页 |
6.2.6 多表连接功能测试 | 第72-73页 |
6.2.7 分组聚合功能测试 | 第73页 |
6.2.8 多列升序降序功能 | 第73-74页 |
6.2.9 综合性语句功能测试 | 第74-75页 |
6.3 性能测试 | 第75-85页 |
6.3.1 查询性能测试 | 第75-80页 |
6.3.1.1 全表扫描性能测试 | 第76-77页 |
6.3.1.2 范围查询性能测试 | 第77-78页 |
6.3.1.3 多表连接性能测试 | 第78-79页 |
6.3.1.4 分组聚合性能测试 | 第79-80页 |
6.3.1.5 升序降序性能测试 | 第80页 |
6.3.2 CPU使用效率测试 | 第80-83页 |
6.3.3 内存开销测试 | 第83-85页 |
6.4 本章小结 | 第85-86页 |
第七章 总结与展望 | 第86-87页 |
致谢 | 第87-88页 |
参考文献 | 第88-90页 |
攻硕期间取得的研究成果 | 第90页 |