基于大规模数据集的并发处理的研究
| 摘要 | 第4-5页 |
| ABSTRACT | 第5-6页 |
| 第一章 引言 | 第9-16页 |
| 1.1 研究背景 | 第9-12页 |
| 1.1.1 技术背景 | 第9-11页 |
| 1.1.2 业务背景 | 第11-12页 |
| 1.2 目前的问题和研究难点 | 第12-13页 |
| 1.3 论文主要工作 | 第13-14页 |
| 1.4 论文的组织结构 | 第14-16页 |
| 第二章 大规模数据集的并发处理系统的分析 | 第16-37页 |
| 2.1 大规模数据集的并发处理系统简介 | 第16-17页 |
| 2.2 系统需求及相关技术分析 | 第17-28页 |
| 2.2.1 系统需求分析 | 第17-19页 |
| 2.2.2 数据库集群 | 第19-21页 |
| 2.2.3 NoSQL数据库 | 第21-23页 |
| 2.2.4 HBASE详细介绍 | 第23-26页 |
| 2.2.5 HBASE适用场景分析 | 第26-28页 |
| 2.3 系统架构分析 | 第28-37页 |
| 2.3.1 数据处理流程 | 第28-29页 |
| 2.3.2 系统主要功能 | 第29-31页 |
| 2.3.3 系统整体架构 | 第31-32页 |
| 2.3.4 关键技术概要 | 第32-37页 |
| 第三章 大规模数据集的并发处理系统的设计 | 第37-48页 |
| 3.1 系统设计目标 | 第37-38页 |
| 3.2 表数据结构设计 | 第38-39页 |
| 3.3 数据预处理 | 第39-41页 |
| 3.3.1 数据库数据 | 第39-40页 |
| 3.3.2 文件数据 | 第40-41页 |
| 3.4 HBASE二级索引 | 第41-46页 |
| 3.4.1 社区的解决方案 | 第41-43页 |
| 3.4.2 级索引的设计 | 第43-44页 |
| 3.4.3 级索引的管理和使用 | 第44-46页 |
| 3.5 数据读写接口设计 | 第46-48页 |
| 第四章 大规模数据集的并发处理系统的实现 | 第48-64页 |
| 4.1 系统环境介绍 | 第48-50页 |
| 4.2 数据迁移 | 第50-54页 |
| 4.2.1 数据库数据迁移 | 第50-51页 |
| 4.2.2 历史数据迁移 | 第51-54页 |
| 4.3 二级索引的实现 | 第54-58页 |
| 4.3.1 历史数据的二级索引 | 第54-56页 |
| 4.3.2 增量数据的二级索引 | 第56-58页 |
| 4.4 数据读写接口实现 | 第58-60页 |
| 4.4.1 写接口实现 | 第58-59页 |
| 4.4.2 读接口实现 | 第59-60页 |
| 4.5 实验测试与分析 | 第60-64页 |
| 4.5.1 数据写入结果分析 | 第60-62页 |
| 4.5.2 数据查询结果分析 | 第62-64页 |
| 第五章 总结 | 第64-67页 |
| 5.1 论文工作总结 | 第64-65页 |
| 5.2 进一步的研究工作 | 第65-67页 |
| 参考文献 | 第67-70页 |
| 致谢 | 第70-71页 |
| 攻读学位期间发表的学术论文目录 | 第71页 |
