首页--工业技术论文--自动化技术、计算机技术论文--计算技术、计算机技术论文--计算机软件论文--程序设计、软件工程论文--程序设计论文

大数据环境下Hadoop作业调度算法研究

摘要第5-6页
ABSTRACT第6-7页
第一章 绪论第10-17页
    1.1 课题研究背景第10-12页
    1.2 Hadoop研究及优化方向第12-14页
    1.3 课题研究内容及意义第14-16页
    1.4 文章组织结构第16-17页
第二章 课题相关技术研究第17-35页
    2.1 并行计算第17-18页
        2.1.1 基本体系结构第17-18页
    2.2 云计算第18-22页
        2.2.1 云计算体系架构第18-21页
        2.2.2 云计算关键技术第21页
        2.2.3 云计算发展现状第21-22页
    2.3 Hadoop云计算平台第22-34页
        2.3.1 Hadoop平台组件简介第22-24页
        2.3.2 Hadoop分布式文件系统HDFS第24-28页
        2.3.3 Hadoop并行计算框架MapReduce第28-33页
        2.3.4 Hadoop国内外发展现状第33-34页
    2.4 本章小结第34-35页
第三章 Hadoop平台作业调度算法研究第35-49页
    3.1 先入先出调度算法第35-36页
    3.2 计算能力调度算法第36-39页
    3.3 公平调度算法第39-43页
    3.4 LATE调度算法第43-48页
        3.4.1 推测式执行机制第44-45页
        3.4.2 LATE调度算法的提出第45-47页
        3.4.3 LATE调度算法改进方向第47-48页
    3.5 本章小结第48-49页
第四章 基于LATE调度算法的数据局部性改进算法第49-66页
    4.1 Hadoop的任务本地化执行第49页
    4.2 LATE调度算法存在数据局部性缺陷第49页
    4.3 Hadoop机架感知机制第49-50页
    4.4 算法改进第50-54页
        4.4.1 LATE算法阈值判定第50-51页
        4.4.2 落后任务判定算法改进第51-53页
        4.4.3 基于LATE调度算法数据局部性改进算法第53-54页
    4.5 算法实现第54-56页
    4.6 实验环境搭建第56-57页
    4.7 完全分布模式具体配置第57-59页
    4.8 测试作业的选择第59-62页
        4.8.1 测试作业类型分析第60页
        4.8.2 数据准备第60-62页
    4.9 算法仿真分析第62-65页
    4.10 本章总结第65-66页
第五章 基于LATE调度算法的资源互补分配改进算法第66-82页
    5.1 算法准备第66-67页
    5.2 Hadoop中作业负载类型分类算法第67-68页
    5.3 节点负载类型判定算法第68-69页
    5.4 基于LATE调度算法的资源互补分配改进算法第69-72页
    5.5 算法实现第72-76页
    5.6 实验环境搭建第76-77页
    5.7 测试作业的选择第77-78页
        5.7.1 测试作业分析第77-78页
    5.8 算法仿真分析第78-81页
    5.9 本章小结第81-82页
第六章 全文总结与展望第82-83页
    6.1 全文总结第82页
    6.2 展望第82-83页
致谢第83-84页
参考文献第84-87页
攻读硕士学位期间取得的成果第87页

论文共87页,点击 下载论文
上一篇:医学图像分类中的特征融合与特征学习研究
下一篇:基于RT-Thread的手持式高性能RFID读写器设计