基于Kafka的高速流量存储分发系统的研究与应用
| 摘要 | 第4-5页 |
| ABSTRACT | 第5-6页 |
| 第一章 绪论 | 第9-13页 |
| 1.1 研究背景 | 第9-10页 |
| 1.2 论文结构 | 第10-13页 |
| 第二章 Hadoop框架综述 | 第13-23页 |
| 2.1 Zookeeper原理 | 第13-14页 |
| 2.2 YARN原理 | 第14-15页 |
| 2.3 Kafka原理 | 第15-18页 |
| 2.4 HDFS以及MapReduce框架原理 | 第18-19页 |
| 2.4.1 HDFS组件 | 第18页 |
| 2.4.2 MapReduce组件 | 第18-19页 |
| 2.5 Storm原理 | 第19-21页 |
| 2.5.1 Topology | 第20页 |
| 2.5.2 Stream | 第20-21页 |
| 2.5.3 数据模型 | 第21页 |
| 2.6 本章小结 | 第21-23页 |
| 第三章 基于Kafka的高速流量存储分发系统 | 第23-35页 |
| 3.1 系统体系结构 | 第24-28页 |
| 3.1.1 采集层 | 第25-26页 |
| 3.1.2 数据分发层 | 第26-27页 |
| 3.1.3 数据层 | 第27-28页 |
| 3.1.4 应用层 | 第28页 |
| 3.2 Kafka性能测试 | 第28-34页 |
| 3.2.1 Kafka速度相关参数调研 | 第28-29页 |
| 3.2.2 测试步骤 | 第29-30页 |
| 3.2.3 测试结果 | 第30-34页 |
| 3.3 系统工作流程 | 第34页 |
| 3.4 本章小结 | 第34-35页 |
| 第四章 数据层设计详解 | 第35-47页 |
| 4.1 数据层的非实时组件 | 第35-44页 |
| 4.1.1 拟解决的关键问题 | 第35页 |
| 4.1.2 组件主要功能 | 第35-36页 |
| 4.1.3 组件整体设计 | 第36-39页 |
| 4.1.4 关键子模块说明 | 第39-44页 |
| 4.2 数据层的实时组件 | 第44-46页 |
| 4.2.1 拟解决的关键问题 | 第44页 |
| 4.2.2 组件主要功能 | 第44-45页 |
| 4.2.3 组件整体设计 | 第45页 |
| 4.2.4 关键子模块说明 | 第45-46页 |
| 4.3 本章小结 | 第46-47页 |
| 第五章 DNS流量以及用户社区分析 | 第47-57页 |
| 5.1 DNS流量分析 | 第47-51页 |
| 5.2 用户社区分析 | 第51-55页 |
| 5.2.1 算法介绍 | 第52-54页 |
| 5.2.2 实验结果 | 第54-55页 |
| 5.3 本章小结 | 第55-57页 |
| 第六章 总结与展望 | 第57-59页 |
| 参考文献 | 第59-63页 |
| 致谢 | 第63-65页 |
| 攻读学位期间发表的学术论文目录 | 第65页 |
