首页--工业技术论文--自动化技术、计算机技术论文--计算技术、计算机技术论文--其他计算机论文

面向高性能计算平台的Hadoop框架研究及优化

摘要第8-9页
ABSTRACT第9-10页
第一章 绪论第11-19页
    1.1 课题研究背景第11-15页
        1.1.1 大数据时代的到来第11-12页
        1.1.2 高性能计算机的研究现状第12-14页
        1.1.3 MapReduce在高性能计算平台上的研究现状第14-15页
    1.2 研究意义和难点第15-17页
        1.2.1 研究意义第15-16页
        1.2.2 研究难点第16-17页
    1.3 本文的主要研究内容和组织安排第17-19页
        1.3.1 本文的主要研究内容第17页
        1.3.2 本文的组织形式第17-19页
第二章 相关技术介绍第19-31页
    2.1 MapReduce编程模型第19-22页
        2.1.1 MapReduce的产生背景第19-20页
        2.1.2 MapReduce主要思想第20页
        2.1.3 MapReduce执行过程第20-21页
        2.1.4 MapReduce实例第21-22页
    2.2 Hadoop框架介绍第22-26页
        2.2.1 Hadoop简介第22-23页
        2.2.2 Hadoop中HDFS实现第23-24页
        2.2.3 Hadoop的MapReduce架构第24-26页
    2.3 MapReduce模型的其他实现第26-29页
        2.3.1 Stanford的Phoenix系统第26-27页
        2.3.2 GPU上MapReduce实现第27-28页
        2.3.3 Spark第28-29页
    2.4 本章小结第29-31页
第三章 面向对象存储系统Hadoop框架I/O优化方法第31-51页
    3.1 面向对象存储系统高性能计算机概述第31-33页
    3.2 面向对象存储系统高性能计算机的Hadoop平台第33-37页
        3.2.1 面向对象存储系统高性能计算机的Hadoop平台I/O过程第33-34页
        3.2.2 MapReduce的shuffle过程分析map任务端分析第34-35页
        3.2.3 面向对象存储系统高性能计算机的Hadoop平台的问题分析第35-37页
    3.3 基于节点内存的中间数据I/O优化方法第37-43页
        3.3.1 问题描述第37-38页
        3.3.2 一种基于节点内存剩余量的任务调度优化方法第38-42页
        3.3.3 一种基于节点统一内存的中间数据I/O优化方法第42-43页
    3.4 一种基于均衡调度的I/O优化方法第43-46页
        3.4.1 问题描述第43-44页
        3.4.2 方法描述第44-46页
    3.5 性能测试与分析第46-49页
    3.6 本章小结第49-51页
第四章 面向多层存储架构Hadoop框架I/O优化方法第51-65页
    4.1 基于多层存储架构的高性能计算机第51-52页
    4.2 面向多层存储架构高性能计算机的Hadoop平台第52-55页
        4.2.1 面向多层存储架构高性能计算机的Hadoop平台I/O过程第52-53页
        4.2.2 MapReduce的shuffle过程reduce任务端分析第53-54页
        4.2.3 面向多层存储架构高性能计算机的Hadoop的问题分析第54-55页
    4.3 I/O加速节点多分组的任务调度方法第55-58页
        4.3.1 问题描述第55页
        4.3.2 方法描述第55-58页
    4.4 基于存储服务隔离的I/O服务质量维护方法第58-61页
        4.4.1 问题描述第59页
        4.4.2 解决方案第59-61页
    4.5 性能与测试分析第61-63页
    4.6 本章小结第63-65页
第五章 结论和展望第65-67页
    5.1 工作总结第65-66页
    5.2 下一步工作展望第66-67页
致谢第67-69页
参考文献第69-73页
作者在学期间取得的学术成果第73页

论文共73页,点击 下载论文
上一篇:面向非刚体图像配准的同名点集优选方法研究
下一篇:面向高清视频的异常行为识别方法