摘要 | 第3-4页 |
ABSTRACT | 第4页 |
目录 | 第5-8页 |
插图索引 | 第8-10页 |
第一章 绪论 | 第10-20页 |
1.1 云计算 | 第10-12页 |
1.1.1 云计算的概念 | 第10-11页 |
1.1.2 云计算类型 | 第11-12页 |
1.2 大数据的产生 | 第12-13页 |
1.3 分布式数据仓库 | 第13-15页 |
1.4 分布式索引 C-index 介绍 | 第15-16页 |
1.5 相关研究工作 | 第16-18页 |
1.5.1 底层系统 | 第16-17页 |
1.5.2 索引技术 | 第17-18页 |
1.6 内容总揽 | 第18-20页 |
第二章 C-index 架构与实现 | 第20-40页 |
2.1 Hadoop 系统 | 第20-26页 |
2.1.1 HDFS 介绍 | 第21-22页 |
2.1.2 MapReduce 引擎 | 第22-24页 |
2.1.3 Hive 简介 | 第24-26页 |
2.2 C-index 系统组成 | 第26-29页 |
2.2.1 系统架构 | 第26-27页 |
2.2.2 数据导入系统 | 第27页 |
2.2.3 核心索引系统 | 第27-28页 |
2.2.4 用户接口 | 第28-29页 |
2.3 C-index 存储结构 | 第29-32页 |
2.3.1 设计背景 | 第29-30页 |
2.3.2 索引文件存储结构 | 第30-31页 |
2.3.3 树节点存储结构 | 第31-32页 |
2.4 C-index 操作 | 第32-37页 |
2.4.1 C-index 创建 | 第32-33页 |
2.4.2 范围查询 | 第33-35页 |
2.4.3 KNN 查询 | 第35-36页 |
2.4.4 索引维护 | 第36-37页 |
2.5 系统优化 | 第37-39页 |
2.5.1 缓存机制 | 第37-38页 |
2.5.2 树节点大小 | 第38-39页 |
2.6 本章小结 | 第39-40页 |
第三章 系统集成与移植 | 第40-52页 |
3.1 阿里巴巴飞天系统 | 第40-41页 |
3.2 飞天平台内核 | 第41-44页 |
3.2.1 分布式文件系统 (盘古) | 第42-43页 |
3.2.2 资源管理和任务调度 (伏羲) | 第43-44页 |
3.3 飞天开放服务 | 第44-46页 |
3.3.1 开放数据处理服务 (ODPS) | 第44-46页 |
3.4 系统迁移 | 第46-47页 |
3.4.1 数据导入系统 (DataLoader) 迁移 | 第46页 |
3.4.2 核心索引系统 (Indexer) 迁移 | 第46-47页 |
3.4.3 元数据表存储 | 第47页 |
3.5 系统集成 | 第47-49页 |
3.5.1 元数据操作 | 第47-48页 |
3.5.2 增加用户命令 | 第48页 |
3.5.3 修改优化器 | 第48-49页 |
3.6 本章小结 | 第49-52页 |
第四章 实验分析 | 第52-68页 |
4.1 Hadoop 集群实验 | 第52-63页 |
4.1.1 配置 | 第52-53页 |
4.1.2 Hadoop 集群索引创建实验 | 第53-54页 |
4.1.3 Hadoop 集群范围查询实验 | 第54-57页 |
4.1.4 KNN 查询实验 | 第57-58页 |
4.1.5 Hive 对比实验 | 第58-61页 |
4.1.6 缓存优化实验 | 第61-63页 |
4.2 飞天集群测试 | 第63-67页 |
4.2.1 飞天集群索引创建实验 | 第64-65页 |
4.2.2 飞天集群查询实验 | 第65-67页 |
4.3 本章小结 | 第67-68页 |
全文总结 | 第68-70页 |
参考文献 | 第70-74页 |
致谢 | 第74-76页 |
攻读学位期间发表的学术论文目录 | 第76-78页 |
攻读学位期间参与的项目 | 第78-80页 |