摘要 | 第4-6页 |
ABSTRACT | 第6-7页 |
第1章 绪论 | 第11-15页 |
1.1 研究背景 | 第11-12页 |
1.2 研究现状 | 第12-13页 |
1.3 本文的研究内容 | 第13页 |
1.4 本文的组织结构 | 第13-14页 |
1.5 本章小结 | 第14-15页 |
第2章 论文相关技术 | 第15-31页 |
2.1 MapReduce编程模型 | 第15-18页 |
2.1.1 MapReduce并行计算流程 | 第15-16页 |
2.1.2 MapReduce运行机制 | 第16-18页 |
2.2 分布式ETL | 第18-24页 |
2.2.1 ETL过程 | 第18-20页 |
2.2.2 分布式ETL | 第20页 |
2.2.3 数据切分策略 | 第20-21页 |
2.2.4 渐变维度 | 第21-24页 |
2.3 MapReduce作业调度 | 第24-30页 |
2.3.1 FIFO调度算法 | 第26页 |
2.3.2 计算能力调度算法 | 第26-28页 |
2.3.3 公平调度算法 | 第28-30页 |
2.4 本章小结 | 第30-31页 |
第3章 MOAP:渐变维度的分布式处理 | 第31-38页 |
3.1 问题背景 | 第31-32页 |
3.2 渐变维度数据更新优化 | 第32-35页 |
3.3 实验与分析 | 第35-37页 |
3.3.1 实验环境 | 第35页 |
3.3.2 数据集 | 第35页 |
3.3.3 实验结果 | 第35-37页 |
3.4 本章小结 | 第37-38页 |
第4章 SBOTA:基于任务时间交替的调度优化 | 第38-45页 |
4.1 问题背景 | 第38-39页 |
4.2 reduce任务本地化概述 | 第39页 |
4.3 基于任务时间交替调度的SBOTA算法 | 第39-41页 |
4.3.1 任务时间评估模型 | 第39页 |
4.3.2 算法描述 | 第39-41页 |
4.4 实验与分析 | 第41-43页 |
4.4.1 实验环境 | 第41页 |
4.4.2 实验结果 | 第41-43页 |
4.5 本章小结 | 第43-45页 |
第5章 基于MapReduce的分布式ETL的应用 | 第45-53页 |
5.1 需求分析 | 第45-46页 |
5.2 系统架构 | 第46页 |
5.3 维度表设计 | 第46-50页 |
5.4 事实表设计 | 第50-51页 |
5.5 测试与分析 | 第51-52页 |
5.6 本章小结 | 第52-53页 |
第6章 总结与展望 | 第53-55页 |
参考文献 | 第55-58页 |
致谢 | 第58-59页 |
攻读学位期间的研究成果目录 | 第59页 |