首页--工业技术论文--自动化技术、计算机技术论文--计算技术、计算机技术论文--计算机软件论文--程序设计、软件工程论文--程序设计论文

基于MapReduce的分布式ETL过程的研究与优化

摘要第4-6页
ABSTRACT第6-7页
第1章 绪论第11-15页
    1.1 研究背景第11-12页
    1.2 研究现状第12-13页
    1.3 本文的研究内容第13页
    1.4 本文的组织结构第13-14页
    1.5 本章小结第14-15页
第2章 论文相关技术第15-31页
    2.1 MapReduce编程模型第15-18页
        2.1.1 MapReduce并行计算流程第15-16页
        2.1.2 MapReduce运行机制第16-18页
    2.2 分布式ETL第18-24页
        2.2.1 ETL过程第18-20页
        2.2.2 分布式ETL第20页
        2.2.3 数据切分策略第20-21页
        2.2.4 渐变维度第21-24页
    2.3 MapReduce作业调度第24-30页
        2.3.1 FIFO调度算法第26页
        2.3.2 计算能力调度算法第26-28页
        2.3.3 公平调度算法第28-30页
    2.4 本章小结第30-31页
第3章 MOAP:渐变维度的分布式处理第31-38页
    3.1 问题背景第31-32页
    3.2 渐变维度数据更新优化第32-35页
    3.3 实验与分析第35-37页
        3.3.1 实验环境第35页
        3.3.2 数据集第35页
        3.3.3 实验结果第35-37页
    3.4 本章小结第37-38页
第4章 SBOTA:基于任务时间交替的调度优化第38-45页
    4.1 问题背景第38-39页
    4.2 reduce任务本地化概述第39页
    4.3 基于任务时间交替调度的SBOTA算法第39-41页
        4.3.1 任务时间评估模型第39页
        4.3.2 算法描述第39-41页
    4.4 实验与分析第41-43页
        4.4.1 实验环境第41页
        4.4.2 实验结果第41-43页
    4.5 本章小结第43-45页
第5章 基于MapReduce的分布式ETL的应用第45-53页
    5.1 需求分析第45-46页
    5.2 系统架构第46页
    5.3 维度表设计第46-50页
    5.4 事实表设计第50-51页
    5.5 测试与分析第51-52页
    5.6 本章小结第52-53页
第6章 总结与展望第53-55页
参考文献第55-58页
致谢第58-59页
攻读学位期间的研究成果目录第59页

论文共59页,点击 下载论文
上一篇:潍坊市寒亭区农业信息化研究
下一篇:潍坊市寒亭区农村社区经济发展研究