摘要 | 第4-6页 |
Abstract | 第6-7页 |
第1章 绪论 | 第14-24页 |
1.1 课题背景 | 第14-15页 |
1.2 研究目的及意义 | 第15-19页 |
1.2.1 大数据存储特点 | 第15-16页 |
1.2.2 NoSQL数据库特点 | 第16页 |
1.2.3 NoSQL数据库中存储结构问题 | 第16-17页 |
1.2.4 NoSQL数据库数据查询中的问题 | 第17-19页 |
1.2.5 数据存储结构优化的作用 | 第19页 |
1.3 研究内容 | 第19-21页 |
1.3.1 研究目的 | 第19-20页 |
1.3.2 本文工作及创新点 | 第20-21页 |
1.4 文章结构 | 第21-22页 |
1.5 本章小结 | 第22-24页 |
第2章 大数据存储与应用综述 | 第24-40页 |
2.1 大数据存储技术 | 第24-29页 |
2.1.1 NoSQL | 第24-25页 |
2.1.2 CAP理论 | 第25-27页 |
2.1.3 数据存储模型 | 第27-29页 |
2.2 大数据应用技术 | 第29-32页 |
2.2.1 离线数据处理 | 第29-31页 |
2.2.2 即时数据处理 | 第31页 |
2.2.3 流式数据处理 | 第31-32页 |
2.3 HBase | 第32-34页 |
2.3.1 HBase架构 | 第32-34页 |
2.3.2 HBase存储 | 第34页 |
2.4 Google交互式分析系统Dremel | 第34-39页 |
2.4.1 嵌套式数据 | 第35-37页 |
2.4.2 嵌套式数据存储格式 | 第37-38页 |
2.4.3 嵌套式数据读取原理 | 第38-39页 |
2.5 本章小结 | 第39-40页 |
第3章 基于HBase嵌套式数据存储系统架构设计 | 第40-48页 |
3.1 分布式集群架构 | 第40-42页 |
3.1.1 主从式分布式集群架构 | 第40-41页 |
3.1.2 环状式分布式集群架构 | 第41-42页 |
3.2 基于HBase嵌套式数据存储系统架构 | 第42页 |
3.3 数据管理类HRegion重构 | 第42-47页 |
3.3.1 HRegion重构相关类的设计 | 第43-46页 |
3.3.2 HRegion重构初始化过程设计 | 第46-47页 |
3.4 本章小结 | 第47-48页 |
第4章 基于HBase嵌套式数据存储系统格式转化 | 第48-55页 |
4.1 HBase表结构 | 第48-49页 |
4.2 HFile文件格式 | 第49-50页 |
4.3 Parquet文件格式 | 第50-51页 |
4.4 存储数据格式转换实现 | 第51-53页 |
4.5 存储数据格式转换实验 | 第53-54页 |
4.6 本章小结 | 第54-55页 |
第5章 基于HBase嵌套式数据存储系统设计与实现 | 第55-74页 |
5.1 嵌套式数据存储模块重构 | 第55-64页 |
5.1.1 HBase写入过程中关键类 | 第55-58页 |
5.1.2 HBase写入数据流程 | 第58-59页 |
5.1.3 Parquet存储数据过程 | 第59-60页 |
5.1.4 嵌套式数据存储模块类设计 | 第60-63页 |
5.1.5 嵌套式数据存储流程 | 第63-64页 |
5.2 嵌套式数据读取模块设计 | 第64-72页 |
5.2.1 HBase读取数据过程中关键类 | 第64-65页 |
5.2.2 HBase读取数据流程 | 第65-67页 |
5.2.3 Parquet读取数据过程 | 第67页 |
5.2.4 嵌套式数据存储系统读取格式模块设计 | 第67-69页 |
5.2.5 嵌套式数据读取模块类设计 | 第69-71页 |
5.2.6 嵌套式数据读取流程 | 第71-72页 |
5.3 本章小结 | 第72-74页 |
第6章 基于HBase嵌套式存储系统性能测试 | 第74-85页 |
6.1 基于HBase嵌套式数据存储系统读写性能分析 | 第74-79页 |
6.1.1 实验目的 | 第74页 |
6.1.2 实验环境准备 | 第74-76页 |
6.1.3 测试工具 | 第76-77页 |
6.1.4 实验过程 | 第77页 |
6.1.5 实验结果分析 | 第77-79页 |
6.2 基于HBase嵌套式数据存储系统数据分析性能分析 | 第79-84页 |
6.2.1 实验环境准备 | 第80-81页 |
6.2.2 实验目的 | 第81页 |
6.2.3 实验过程 | 第81-82页 |
6.2.4 实验结果分析 | 第82-84页 |
6.3 本章小结 | 第84-85页 |
第7章 总结与展望 | 第85-88页 |
7.1 本文工作总结 | 第85-86页 |
7.2 未来工作展望 | 第86-88页 |
7.2.1 嵌套式存储结构的扩展 | 第86页 |
7.2.2 嵌套式存储结构查询应用 | 第86-87页 |
7.2.3 数据按需选择CAP | 第87-88页 |
参考文献 | 第88-91页 |
攻读硕士学位期间主要的研究成果 | 第91-92页 |
致谢 | 第92页 |