基于Hadoop的数据处理系统的设计
摘要 | 第1-7页 |
Abstract | 第7-10页 |
第1章 绪论 | 第10-14页 |
·研究背景和意义 | 第10-11页 |
·国内外研究现状 | 第11-12页 |
·论文结构及内容安排 | 第12-14页 |
第2章 Hadoop 和 HBase 的理论分析 | 第14-26页 |
·Hadoop 架构 | 第14-18页 |
·Hadoop 概述 | 第14-15页 |
·HDFS | 第15-17页 |
·MapReduce | 第17-18页 |
·HBase 数据库分析 | 第18-24页 |
·HBase 概述 | 第18页 |
·HBase 数据模型 | 第18-19页 |
·HBase 系统架构 | 第19-21页 |
·HBase 存储格式 | 第21-23页 |
·HBase Shell | 第23-24页 |
·本章小结 | 第24-26页 |
第3章 Hadoop 集群调度策略的改进 | 第26-34页 |
·遗传算法 | 第26-28页 |
·概述 | 第26-27页 |
·遗传操作 | 第27页 |
·算法控制参数 | 第27-28页 |
·遗传算法流程图 | 第28页 |
·WLGA 任务调度算法设计 | 第28-31页 |
·染色体编码规则 | 第28-29页 |
·节点工作负载 | 第29-30页 |
·生成初始种群 | 第30页 |
·建立适应度函数 | 第30页 |
·交叉和变异 | 第30-31页 |
·实验仿真 | 第31-33页 |
·GA 与 WLGA 性能验证实验 | 第31-32页 |
·WLGA 与 TDE 性能对比实验 | 第32-33页 |
·本章小结 | 第33-34页 |
第4章 Hadoop 数据处理系统的设计 | 第34-42页 |
·数据处理系统设计要求 | 第34页 |
·数据处理系统总体架构 | 第34-35页 |
·HBase 数据库设计 | 第35页 |
·数据存储设计 | 第35-39页 |
·创建表 | 第35-36页 |
·删除表 | 第36页 |
·初始化数据格式 | 第36-38页 |
·插入数据 | 第38-39页 |
·数据查看 | 第39-41页 |
·查询表 | 第39-40页 |
·构建图表 | 第40-41页 |
·浏览表 | 第41页 |
·本章小结 | 第41-42页 |
第5章 云平台部署和性能测试实验 | 第42-57页 |
·硬件环境 | 第42页 |
·软件环境 | 第42-43页 |
·云平台部署 | 第43-52页 |
·Hadoop 集群搭建 | 第43-47页 |
·HBase 部署 | 第47-50页 |
·Web 服务器部署 | 第50-52页 |
·云平台性能测试 | 第52-56页 |
·HadoopI/O 性能测试 | 第52-54页 |
·MapReduce 性能测试 | 第54页 |
·HBase 性能测试 | 第54-56页 |
·本章小结 | 第56-57页 |
结论 | 第57-59页 |
致谢 | 第59-60页 |
参考文献 | 第60-63页 |
作者简介 | 第63页 |
攻读硕士学位期间发表的论文和科研成果 | 第63-64页 |