首页--工业技术论文--自动化技术、计算机技术论文--计算技术、计算机技术论文--计算机软件论文--程序设计、软件工程论文--程序设计论文

基于Docker技术的Hadoop性能优化研究

摘要第4-5页
abstract第5页
第一章 绪论第8-12页
    1.1 选题的研究背景及意义第8-9页
    1.2 论文的主要内容第9-10页
    1.3 论文的组织结构第10-11页
    1.4 本章小结第11-12页
第二章 相关知识背景介绍第12-25页
    2.1 Hadoop集群技术介绍第12-18页
        2.1.1 Hadoop平台简介第12-13页
        2.1.2 HDFS第13-16页
        2.1.3 MapReduce模型第16-17页
        2.1.4 YARN第17-18页
    2.2 Docker容器技术第18-23页
        2.2.1 Docker容器技术简介第18-19页
        2.2.2 Docker的组成第19-20页
        2.2.3 Docker容器与服务器虚拟化的区别第20-21页
        2.2.4 Docker的读写性第21-23页
    2.3 秘密共享技术第23-25页
第三章 系统环境搭建和内存配置分析第25-42页
    3.1 系统环境搭建第25-27页
        3.1.1 硬件环境第25-26页
        3.1.2 软件环境第26-27页
    3.2 系统方案的实现第27-32页
        3.2.1 Docker容器集群的搭建第27-28页
        3.2.2 Hadoop平台的搭建过程第28-30页
        3.2.3 Docker集群部署方案第30-32页
    3.3 基于Docker容器的Hadoop架构平台搭建第32-35页
        3.3.1 Docker中搭建Hadoop平台第32-33页
        3.3.2 内存优化的原因第33-34页
        3.3.3 Hadoop的默认内存配置参数第34-35页
    3.4 实验测试与结果分析第35-41页
        3.4.1 实验方案第35-36页
        3.4.2 yarn.nodemanager.resource.memory-mb对WordCount的影响第36-38页
        3.4.3 yarn.nodemanager.resource.memory-mb对TeraSort的影响第38-40页
        3.4.4 实验结果第40-41页
    3.5 本章小结第41-42页
第四章 YARN性能优化第42-50页
    4.1 YARN的优化第42-43页
        4.1.1 YARN问题由来第42-43页
        4.1.2 Mapreduce并行化工作第43页
    4.2 实验环境第43-45页
    4.3 容器大小和配置资源划分第45-49页
        4.3.1 任务并发和工作完成时间第47-48页
        4.3.2 实验结论第48-49页
    4.4 本章小结第49-50页
第五章 异构系统下数据安全第50-62页
    5.1 背景和相关介绍第50-52页
        5.1.1 Hadoop默认数据放置策略第50-51页
        5.1.2 异构漏洞第51-52页
        5.1.3 具有异构漏洞的分布式存储系统中的安全碎片分配第52页
    5.2 异构系统下数据安全存在的问题第52-53页
    5.3 优化方案第53-61页
        5.3.1 系统环境第53-56页
        5.3.2 解决方案设计第56-57页
        5.3.3 保证模型第57-59页
        5.3.4 系统保证模型评估第59-60页
        5.3.5 解决方案性能分析第60-61页
    5.4 本章小结第61-62页
第六章 总结与展望第62-64页
    6.1 论文工作总结第62-63页
    6.2 论文不足与展望第63-64页
参考文献第64-66页
附录1 攻读硕士学位期间撰写的论文第66-67页
附录2 攻读硕士学位期间参加的科研项目第67-68页
致谢第68页

论文共68页,点击 下载论文
上一篇:GIS技术在“城市双修”现状评估中的应用研究
下一篇:基于多特征融合的稀疏表示目标追踪方法的研究