基于Hadoop的数据作业管理平台设计与实现
摘要 | 第1-5页 |
Abstract | 第5-9页 |
第一章 绪论 | 第9-21页 |
·研究背景与意义 | 第9-10页 |
·本课题的研究进展 | 第10-19页 |
·分布式存储研究现状 | 第10-16页 |
·分布式并行计算研究现状 | 第16-18页 |
·Hadoop数据作业管理研究现状 | 第18-19页 |
·本文主要研究内容 | 第19-21页 |
第二章 平台相关技术研究 | 第21-31页 |
·Hadoop数据存储技术 | 第21-24页 |
·Hadoop系统架构 | 第21-23页 |
·HDFS分布式文件系统 | 第23-24页 |
·MapReduce编程技术 | 第24-28页 |
·MapReduce编程模型 | 第24-26页 |
·MapReduce程序的优化与封装 | 第26-28页 |
·Nginx+FastCGI+MFC编程技术 | 第28-30页 |
·Nginx+FastCGI | 第28-29页 |
·MFC | 第29-30页 |
·本章小结 | 第30-31页 |
第三章 平台需求分析与总体架构 | 第31-49页 |
·基于Hadoop的数据作业管理平台需求分析 | 第31-37页 |
·平台需求分析概述 | 第31-32页 |
·Hadoop存储计算平台需求分析 | 第32-33页 |
·平台用户管理业务需求分析 | 第33-34页 |
·平台图片数据作业业务需求分析 | 第34-37页 |
·基于Hadoop的数据作业管理平台总体设计 | 第37-45页 |
·设计原则 | 第37-38页 |
·平台结构 | 第38-42页 |
·平台模块 | 第42-45页 |
·部署环境设计 | 第45-46页 |
·本章小结 | 第46-49页 |
第四章 平台关键模块的详细设计与实现 | 第49-67页 |
·原始数据上传模块的详细设计与实现 | 第49-51页 |
·原始数据上传模块设计方案 | 第49-50页 |
·原始数据上传模块具体实现 | 第50-51页 |
·图片拼接处理模块的详细设计与实现 | 第51-55页 |
·图片拼接处理模块设计立案 | 第51-53页 |
·图片拼接处理模块具体实现 | 第53-55页 |
·图片隐私处理模块的详细设计与实现 | 第55-60页 |
·图片隐私处理模块设计方案 | 第55-58页 |
·图片隐私处理模块具体实现 | 第58-60页 |
·关系数据库的设计与实现 | 第60-65页 |
·Hadoop集群部署详细设计 | 第65-66页 |
·本章小结 | 第66-67页 |
第五章 平台的验证与分析 | 第67-77页 |
·平台运行环境 | 第67-68页 |
·平台功能验证与与分析 | 第68-72页 |
·平台性能验证与分析 | 第72-75页 |
·本章小结 | 第75-77页 |
第六章 结论与展望 | 第77-79页 |
·论文工作总结 | 第77-78页 |
·未来工作展望 | 第78-79页 |
参考文献 | 第79-81页 |
致谢 | 第81-83页 |
个人简历、在学期间发表的论文与研究成果 | 第83页 |