基于CDH对HDFS监控预警系统设计与实现
摘要 | 第3-5页 |
ABSTRACT | 第5-6页 |
第一章 绪论 | 第12-17页 |
1.1 研究背景 | 第12-13页 |
1.2 相关研究情况 | 第13-16页 |
1.2.1 云监控概况及当前现状 | 第13-14页 |
1.2.2 云预警概况及相关研究现状 | 第14-15页 |
1.2.3 CDH平台概况及现状 | 第15-16页 |
1.3 论文组织结构 | 第16-17页 |
第二章 云监控预警相关介绍 | 第17-22页 |
2.1 CDH平台 | 第17-19页 |
2.1.1 CDH体系结构 | 第17-18页 |
2.1.2 HDFS | 第18-19页 |
2.2 ETL技术 | 第19-20页 |
2.2.1 数据抽取 | 第19页 |
2.2.2 数据清洗 | 第19-20页 |
2.2.3 数据转换 | 第20页 |
2.2.4 数据加载 | 第20页 |
2.3 朴素贝叶斯模型 | 第20-21页 |
2.4 本章小结 | 第21-22页 |
第三章 基于CDH对HDFS监控预警系统的设计 | 第22-39页 |
3.1 系统设计思想 | 第22-23页 |
3.2 系统总体设计模型 | 第23-25页 |
3.2.1 系统总体模型 | 第23-24页 |
3.2.2 系统总体架构模式 | 第24-25页 |
3.3 局部模型设计(ETL过程) | 第25-31页 |
3.3.1 ETL过程主要流程 | 第25-29页 |
3.3.2 ETL过程所涉及相关算法原理 | 第29-31页 |
3.4 系统的详细设计 | 第31-38页 |
3.4.1 系统角色及其功能设计 | 第31页 |
3.4.2 监控部分设计 | 第31-33页 |
3.4.3 预警部分设计 | 第33-38页 |
3.5 本章小结 | 第38-39页 |
第四章 基于CDH对HDFS监控预警系统实现 | 第39-57页 |
4.1 实验环境 | 第39-40页 |
4.2 CDH平台搭建 | 第40-48页 |
4.3 系统具体实现 | 第48-52页 |
4.3.1 代码目录结构 | 第48页 |
4.3.2 系统连接CDH平台 | 第48-49页 |
4.3.3 监控部分ETL数据实现 | 第49-51页 |
4.3.4 系统预警的部分实现 | 第51-52页 |
4.4 对于HDFS监控预警系统测试 | 第52-56页 |
4.5 本章小结 | 第56-57页 |
第五章 总结与展望 | 第57-58页 |
参考文献 | 第58-61页 |
致谢 | 第61页 |