基于实时日志系统的海量日志服务平台设计与实现
摘要 | 第5-6页 |
Abstract | 第6-7页 |
第一章 绪论 | 第10-18页 |
1.1 研究背景与意义 | 第10-11页 |
1.2 国内外研究现状 | 第11-15页 |
1.3 本文主要研究内容 | 第15页 |
1.4 本文组织结构 | 第15-18页 |
第二章 系统现状和相关技术分析 | 第18-28页 |
2.1 企业现有日志收集系统架构和问题 | 第18-20页 |
2.1.1 企业现有的日志收集系统的架构 | 第18-19页 |
2.1.2 现有系统存在的问题 | 第19-20页 |
2.2 相关技术研究 | 第20-25页 |
2.2.1 高并发技术研究 | 第20-22页 |
2.2.3 海量数据存储技术研究 | 第22-24页 |
2.2.4 分布式系统管理技术研究 | 第24页 |
2.2.5 数据应用服务和可视化技术研究 | 第24-25页 |
2.3 本章小结 | 第25-28页 |
第三章 日志服务平台的需求分析和架构设计 | 第28-36页 |
3.1 日志服务平台系统需求分析 | 第28-30页 |
3.1.1 功能需求 | 第28-29页 |
3.1.2 性能指标 | 第29-30页 |
3.2 日志服务平台总体设计 | 第30-33页 |
3.2.1 设计原则 | 第30-31页 |
3.2.2 系统整体架构 | 第31-32页 |
3.2.3 系统组成模块 | 第32-33页 |
3.3 本章小结 | 第33-36页 |
第四章 系统关键模块的详细设计与实现 | 第36-56页 |
4.1 业务流程模块设计与实现 | 第36-39页 |
4.1.1 基本概念定义 | 第36-38页 |
4.1.2 用户流程设计 | 第38-39页 |
4.2 数据源接入模块设计与实现 | 第39-42页 |
4.2.1 日志采集管道 | 第39-40页 |
4.2.2 采集方式 | 第40-42页 |
4.3 存储管理模块设计与实现 | 第42-46页 |
4.3.1 日志中枢 | 第42-43页 |
4.3.2 日志库 | 第43-44页 |
4.3.3 日志数据的写入过程 | 第44-45页 |
4.3.4 日志数据的删除和读取过程 | 第45-46页 |
4.4 数据处理模块设计与实现 | 第46-50页 |
4.4.1 实时消费 | 第46-47页 |
4.4.2 实时查询 | 第47-48页 |
4.4.3 投递存储 | 第48-50页 |
4.5 元数据服务和权限管理模块设计与实现 | 第50-51页 |
4.5.1 日志元数据的结构设计 | 第50页 |
4.5.2 日志元数据服务 | 第50-51页 |
4.5.3 用户权限设计和实现 | 第51页 |
4.6 数据可视化模块设计与实现 | 第51-53页 |
4.6.1 UI设计 | 第52页 |
4.6.2 可视化组件的设计 | 第52-53页 |
4.6.3 数据可视化模块的具体实现 | 第53页 |
4.7 本章小结 | 第53-56页 |
第五章 日志服务平台的实施与验证 | 第56-64页 |
5.1 系统部署 | 第56-58页 |
5.1.1 系统部署环境 | 第56-57页 |
5.1.2 系统部署方案 | 第57-58页 |
5.2 系统功能测试 | 第58-60页 |
5.3 系统性能测试与分析 | 第60-62页 |
5.4 本章小结 | 第62-64页 |
第六章 结论与展望 | 第64-68页 |
6.1 日志服务平台已经达到的目标 | 第64-65页 |
6.2 下一步工作展望 | 第65-68页 |
参考文献 | 第68-70页 |
致谢 | 第70-72页 |
个人简历、在学期间发表的论文与研究成果 | 第72页 |