首页--工业技术论文--自动化技术、计算机技术论文--计算技术、计算机技术论文--计算机软件论文--程序设计、软件工程论文--软件工程论文

集群引擎MapReduce的中间数据存贮与传输优化的研究与实现

摘要第4-5页
Abstract第5页
第1章 绪论第8-17页
    1.1 课题来源第8-9页
    1.2 项目背景及研究的目的和意义第9-11页
    1.3 与课题相关的国内外研究状况第11-15页
        1.3.1 管道化改进思想第11-13页
        1.3.2 内存缓存改进思想第13-14页
        1.3.3 轻量级压缩改进思想第14-15页
    1.4 本论文的主要内容第15-17页
第2章 系统需求分析与核心问题研究第17-31页
    2.1 业务需求分析第17-22页
        2.1.1 业务需求分析第17-20页
        2.1.2 系统优化标准第20-22页
    2.2 中间数据存贮与传输优化问题研究第22-29页
        2.2.1 Map 任务中间数据存贮问题第23-25页
        2.2.2 中间数据传输优化问题第25-28页
        2.2.3 Reduce 任务中间数据存贮问题第28-29页
    2.3 中间数据存贮与传输优化的非功能需求第29-30页
    2.4 本章小结第30-31页
第3章 MapReduce 核心模块设计第31-47页
    3.1 总体设计第31-33页
        3.1.1 系统 Shuffler 部分体系结构第31-32页
        3.1.2 Shuffle 系统读写中间数据方式第32-33页
    3.2 Map 任务中间数据存贮模块的设计第33-38页
        3.2.1 Map 任务中间数据存贮模块的类设计第33-37页
        3.2.2 Map 任务中间数据存贮模块的接口设计第37-38页
    3.3 中间数据传输优化模块的设计第38-43页
        3.3.1 中间数据传输优化模块的详细设计第38-41页
        3.3.2 中间数据传输优化模块的接口设计第41-43页
    3.4 Reduce 任务中间数据存贮模块的设计第43-46页
        3.4.1 Reduce 任务中间数据存贮模块的详细设计第43-45页
        3.4.2 Reduce 任务中间数据存贮模块的接口设计第45-46页
    3.5 本章小结第46-47页
第4章 MapReduce 核心模块实现第47-56页
    4.1 Map 任务中间数据存贮模块实现第47-51页
    4.2 中间数据传输优化模块实现第51-52页
    4.3 Reduce 任务中间数据存贮模块实现第52-55页
    4.4 本章小结第55-56页
第5章 系统运行与测试第56-68页
    5.1 系统配置及运行情况第56-60页
        5.1.1 系统运行环境第56-57页
        5.1.2 系统运行情况第57-60页
    5.2 系统测试第60-67页
        5.2.1 系统测试环境第60页
        5.2.2 系统测试用例及分析第60-64页
        5.2.3 系统性能优化测试与分析第64-67页
    5.3 本章小结第67-68页
结论第68-69页
参考文献第69-73页
致谢第73-74页
个人简历第74页

论文共74页,点击 下载论文
上一篇:媒体信息内容与中国股市中的股票收益的关系
下一篇:基于LDAP的统一用户管理系统的设计与实现