首页--工业技术论文--自动化技术、计算机技术论文--计算技术、计算机技术论文

面向MapReduce计算模型的调度技术研究

摘要第10-12页
Abstract第12-14页
第一章 绪论第15-27页
    1.1 云计算第15-18页
        1.1.1 定义第15-16页
        1.1.2 特点第16页
        1.1.3 服务模式第16-17页
        1.1.4 主要技术第17-18页
    1.2 云计算调度技术第18-21页
        1.2.1 MapReduce简介第18-19页
        1.2.2 MapReduce任务调度方法第19-21页
    1.3 云调度技术目前存在的问题第21-23页
    1.4 本文工作第23-25页
    1.5 论文结构第25-27页
第二章 相关工作第27-43页
    2.1 HDFS云存储第27-29页
    2.2 MapReduce并行计算框架第29-33页
        2.2.1 Hadoop MapReduce第29-30页
        2.2.2 改进的MapReduce框架第30-33页
    2.3 MapReduce调度第33-39页
        2.3.1 以提高资源利用率为目标第33-34页
        2.3.2 以优化“长尾”问题为目标第34-36页
        2.3.3 以优化Shuffle时间为目标第36-37页
        2.3.4 以优化调度器工作负载为目标第37-39页
    2.4 非精确计算方法第39-41页
    2.5 小结第41-43页
第三章 优化Map+Shuffle运行效率的数据分配第43-61页
    3.1 引言第43页
    3.2 数据分配问题第43-48页
        3.2.1 Map+Shuffle时间第43-44页
        3.2.2 分配问题描述第44-45页
        3.2.3 Map+Shuffle时间的计算方法第45-48页
    3.3 数据的子空间划分第48-49页
    3.4 子空间数据最优分配第49-52页
        3.4.1 子空间Shuffle时间下界的最小值第49-50页
        3.4.2 子空间最优数据分配构造算法第50-52页
    3.5 数据最优分配第52-57页
        3.5.1 不同子空间Map+Shuffle时间的关系第52-55页
        3.5.2 收敛定理第55-56页
        3.5.3 数据最优分配算法第56-57页
    3.6 实验第57-60页
    3.7 小结第60-61页
第四章 基于节点性能的MapReduce任务调度第61-75页
    4.1 引言第61页
    4.2 任务调度问题第61-63页
    4.3 最优任务调度第63-68页
        4.3.1 最优任务调度问题第63-64页
        4.3.2 估算任务平均执行时间第64-67页
        4.3.3 基于任务执行时间的最优任务调度第67-68页
    4.4 基于节点性能估算的任务调度算法第68-70页
    4.5 实验第70-73页
    4.6 小结第73-75页
第五章 加速MapReduce非精确计算的任务调度第75-93页
    5.1 引言第75页
    5.2 面向非精确计算的MapReduce加速模型第75-77页
        5.2.1 MapReduce的运行特点第75-76页
        5.2.2 非精确计算特征第76页
        5.2.3 MapCheckReduce模型第76-77页
    5.3 Check机制第77-80页
    5.4 终止剩余Map任务第80-82页
        5.4.1 Map任务状态分析第80-81页
        5.4.2 取消剩余任务策略第81-82页
    5.5 异步问题处理第82-85页
    5.6 面向MapCheckReduce的编程模型第85-88页
    5.7 实验第88-91页
        5.7.1 词频统计实验第88-89页
        5.7.2 网络舆情热词检测实验第89-91页
    5.8 小结第91-93页
第六章 支撑串行程序并行执行的任务调度第93-109页
    6.1 引言第93-94页
    6.2 MEX计算模型第94-97页
        6.2.1 MPI与MapReduce第94-95页
        6.2.2 串行程序及其并行化改造第95-96页
        6.2.3 面向可执行程序的MEX并行计算框架第96-97页
    6.3 MEX可执行程序启动方式第97-98页
    6.4 基于数据预取的数据本地化机制第98-100页
    6.5 MEX任务容错第100-102页
    6.6 实验第102-108页
        6.6.1 MEX平台第102-104页
        6.6.2 实验结果第104-108页
    6.7 小结第108-109页
第七章 结论与展望第109-113页
    7.1 工作总结第109-111页
    7.2 研究展望第111-113页
致谢第113-115页
参考文献第115-123页
作者在学期间取得的学术成果第123-125页
攻读博士学位期间参加的主要科研工作第125页

论文共125页,点击 下载论文
上一篇:基于RGB-D的人数统计方法研究
下一篇:面向互联网应用的不平衡数据分类技术研究