大数据平台的自动化部署与监控系统设计与实现
摘要 | 第5-6页 |
ABSTRACT | 第6-7页 |
第1章 绪论 | 第10-16页 |
1.1 课题研究背景及意义 | 第10-11页 |
1.2 国内外研究现状 | 第11-13页 |
1.3 主要研究内容 | 第13-15页 |
1.4 论文结构与安排 | 第15-16页 |
第2章 系统总体设计 | 第16-22页 |
2.1 自动化部署设计 | 第16页 |
2.2 集群监控相关技术 | 第16-19页 |
2.2.1 集群监控工具Ganglia | 第16-18页 |
2.2.2 网络监控工具Nagios | 第18页 |
2.2.3 Java管理扩展工具JMX | 第18-19页 |
2.3 集群监控关键点 | 第19-20页 |
2.3.1 监控技术的选取 | 第19页 |
2.3.2 MongoDB缓存数据库 | 第19页 |
2.3.3 Zookeeper配置中心 | 第19-20页 |
2.4 总体设计 | 第20-21页 |
2.5 本章小结 | 第21-22页 |
第3章 自动化部署模块设计 | 第22-35页 |
3.1 模块架构 | 第22-26页 |
3.2 各组件自动化部署详细设计 | 第26-32页 |
3.2.1 集群环境部署设计 | 第26-27页 |
3.2.2 Zookeeper组件部署设计 | 第27-28页 |
3.2.3 Hadoop组件部署设计 | 第28-29页 |
3.2.4 Jstorm组件部署设计 | 第29-30页 |
3.2.5 Kafka组件部署设计 | 第30页 |
3.2.6 Redis组件部署设计 | 第30-31页 |
3.2.7 Mysql组件部署设计 | 第31-32页 |
3.3 Zookeeper初始化设计 | 第32-34页 |
3.4 本章小结 | 第34-35页 |
第4章 监控模块设计 | 第35-52页 |
4.1 模块架构 | 第35-38页 |
4.2 大数据组件监控信息采集与存储 | 第38-46页 |
4.2.1 Kafka组件监控设计 | 第39-42页 |
4.2.2 Redis组件监控设计 | 第42页 |
4.2.3 Jstorm组件监控设计 | 第42-43页 |
4.2.4 Hbase组件监控设计 | 第43-44页 |
4.2.5 Hadoop组件监控设计 | 第44-46页 |
4.2.6 Mysql组件监控设计 | 第46页 |
4.3 服务器监控指标 | 第46-49页 |
4.4 监控缓存模块 | 第49-51页 |
4.5 本章小结 | 第51-52页 |
第5章 整体系统实现与展示 | 第52-66页 |
5.1 自动化部署展示 | 第52-56页 |
5.2 Zookeeper配置中心初始化 | 第56-57页 |
5.3 监控模块实现与展示 | 第57-64页 |
5.3.1 Web监控界面设计 | 第57页 |
5.3.2 监控模块Web界面展示 | 第57-64页 |
5.4 本章小结 | 第64-66页 |
第6章 结论与展望 | 第66-68页 |
6.1 总结 | 第66-67页 |
6.2 展望 | 第67-68页 |
参考文献 | 第68-70页 |
致谢 | 第70页 |