致谢 | 第5-6页 |
摘要 | 第6-7页 |
ABSTRACT | 第7页 |
1 绪论 | 第11-17页 |
1.1 项目背景 | 第11-12页 |
1.2 行业现状 | 第12-13页 |
1.3 本文的主要工作 | 第13-14页 |
1.4 论文组织结构 | 第14-17页 |
2 相关技术 | 第17-27页 |
2.1 Storm | 第17-19页 |
2.1.1 Storm系统架构及其存在的问题 | 第17-19页 |
2.1.2 JStorm对Storm的改进 | 第19页 |
2.2 HBase | 第19-22页 |
2.2.1 HBase的系统架构 | 第20-21页 |
2.2.2 OpenTSDB介绍 | 第21-22页 |
2.3 Kafka | 第22-23页 |
2.4 Flume | 第23页 |
2.5 其他参考系统 | 第23-26页 |
2.5.1 Azkaban | 第24-25页 |
2.5.2 Quartz | 第25-26页 |
2.6 本章小结 | 第26-27页 |
3 需求分析 | 第27-31页 |
3.1 功能性需求 | 第27-29页 |
3.2 非功能性需求 | 第29-30页 |
3.3 本章小结 | 第30-31页 |
4 总体架构 | 第31-43页 |
4.1 日志格式规范化 | 第31-32页 |
4.2 系统技术架构 | 第32-36页 |
4.2.1 实时日志采集 | 第33-34页 |
4.2.2 实时日志处理 | 第34-35页 |
4.2.3 实时监控告警 | 第35-36页 |
4.3 系统物理架构 | 第36-37页 |
4.4 可视化层功能架构 | 第37-38页 |
4.5 系统接口设计 | 第38-41页 |
4.5.1 内部接口 | 第39-40页 |
4.5.2 外部接口 | 第40-41页 |
4.6 本章小结 | 第41-43页 |
5 详细设计和系统实现 | 第43-73页 |
5.1 实时日志采集实现 | 第43-52页 |
5.1.1 数据采集传输过程 | 第43-44页 |
5.1.2 VSource实现 | 第44-47页 |
5.1.3 VChannel实现 | 第47-51页 |
5.1.4 数据采集架构可靠性 | 第51-52页 |
5.2 实时计算引擎实现 | 第52-57页 |
5.2.1 拓扑任务初始化 | 第53-54页 |
5.2.2 TickSpout实现 | 第54页 |
5.2.3 PublicFilterBolt实现 | 第54-56页 |
5.2.4 PublicAggreBolt实现 | 第56-57页 |
5.2.5 PublicOpenTSDBBolt实现 | 第57页 |
5.3 监控服务层实现 | 第57-68页 |
5.3.1 监控层调用流程 | 第57-58页 |
5.3.2 分发服务 | 第58-61页 |
5.3.3 监控服务 | 第61-64页 |
5.3.4 报警服务 | 第64-68页 |
5.4 平台前端实现 | 第68-72页 |
5.5 本章小结 | 第72-73页 |
6 系统测试与验证 | 第73-79页 |
6.1 测试数据构造 | 第73页 |
6.2 平台功能测试 | 第73-76页 |
6.3 平台性能测试 | 第76-78页 |
6.4 本章小结 | 第78-79页 |
7 总结与展望 | 第79-81页 |
7.1 总结 | 第79-80页 |
7.2 展望 | 第80-81页 |
参考文献 | 第81-83页 |
作者简历及攻读硕士学位期间取得的研究成果 | 第83-87页 |
学位论文数据集 | 第87页 |