首页--工业技术论文--自动化技术、计算机技术论文--计算技术、计算机技术论文--计算机软件论文--程序设计、软件工程论文--程序设计论文

Hadoop环境中面向迭代应用的性能优化机制研究

摘要第3-4页
ABSTRACT第4-5页
第一章 引言第9-14页
    1.1 研究背景及意义第9-11页
    1.2 国内外相关研究第11-12页
    1.3 主要研究内容及论文组织结构第12-14页
第二章 MapReduce机制下迭代应用的性能分析第14-32页
    2.1 MapReduce概述第14-20页
        2.1.1 MapReduce架构介绍第14-16页
        2.1.2 MapReduce的数据流第16-19页
        2.1.3 MapReduce公平调度算法第19-20页
    2.2 迭代应用的相关介绍第20-27页
        2.2.1 迭代应用概述第20页
        2.2.2 使用MapReduce的处理迭代应用优势第20-21页
        2.2.3 常见的迭代应用及其针对MapReduce机制的设计方案第21-25页
        2.2.4 迭代应用在MapReduce环境中的循环实现第25-27页
    2.3 影响迭代应用性能的关键因素第27-29页
        2.3.1 MapReduce全局线性运行策略第27页
        2.3.2 迭代应用中的静态数据和可变数据第27页
        2.3.3 多对多的数据传输方式第27-28页
        2.3.4 任务调度及阈值检测第28页
        2.3.5 迭代过程中的多种依赖关系第28-29页
    2.4 基于MapReduce的迭代应用优化研究第29-31页
    2.5 本章小结第31-32页
第三章 一种针对MapReduce环境中迭代应用的性能优化机制第32-46页
    3.1 迭代应用性能优化机制整体架构第32-33页
    3.2 局部线性运行策略第33-36页
    3.3 循环任务调度设计第36-39页
    3.4 并行迭代策略第39-43页
        3.4.1 连续迭代间reduce任务的启动策略第41-42页
        3.4.2 reduce和map之间的数据流第42-43页
        3.4.3 map任务JVM复用第43页
    3.5 编程模型与接口第43-44页
    3.6 本章小结第44-46页
第四章 基于Hadoop的迭代优化机制实现和性能评测第46-66页
    4.1 Hadoop分布式框架介绍第46-51页
        4.1.1 Hadoop总体介绍第46-47页
        4.1.2 Hadoop架构体系第47页
        4.1.3 Hadoop工作流程第47-51页
    4.2 实验方法及平台第51页
    4.3 测试数据和程序第51-55页
        4.3.1 测试数据第51-52页
        4.3.2 测试程序第52-55页
    4.4 实验结果与性能分析第55-65页
        4.4.1 局部线性运行机制评估第55-60页
        4.4.2 循环任务调度评估第60-61页
        4.4.3 并行迭代评估第61-63页
        4.4.4 同步阈值检测第63-64页
        4.4.5 优化机制性能参数L取值测试第64-65页
    4.5 本章小结第65-66页
第五章 总结与展望第66-68页
    5.1 总结第66-67页
    5.2 未来的工作第67-68页
参考文献第68-72页
致谢第72-73页
附录第73页
    A1. 攻读硕士学位期的工作第73页
    A2. 攻读硕士学位期间获准的软件著作权登记第73页

论文共73页,点击 下载论文
上一篇:电力物资管理系统的分析与设计
下一篇:基于关联数据的农业科技信息服务平台研究