基于Hadoop技术的电信大数据分析平台的设计和实现
摘要 | 第6-8页 |
ABSTRACT | 第8-9页 |
1 绪论 | 第12-16页 |
1.1 本文的背景 | 第12-13页 |
1.2 电信的网络优化平台的现状 | 第13页 |
1.3 Hadoop技术的现状 | 第13-14页 |
1.4 本文的主要工作及技术 | 第14页 |
1.5 本文的结构安排 | 第14-16页 |
2 HADOOP相关技术研究 | 第16-23页 |
2.1 Hadoop介绍 | 第16-18页 |
2.2 HDFS | 第18-20页 |
2.3 YARN | 第20-21页 |
2.4 MapReduce | 第21-22页 |
2.5 Hive | 第22页 |
2.6 HBase | 第22页 |
2.7 本章小结 | 第22-23页 |
3 电信大数据分析平台的设计 | 第23-35页 |
3.1 需求分析 | 第23-26页 |
3.2 总体设计 | 第26-28页 |
3.2.1 周期性数据统计需求 | 第27页 |
3.2.2 实时数据查询需求 | 第27-28页 |
3.2.3 中间件需求 | 第28页 |
3.2.4 复杂模型数据分析需求 | 第28页 |
3.3 大数据分析平台的架构 | 第28-34页 |
3.3.1 基本架构介绍 | 第28-31页 |
3.3.2 大数据分析平台和原网优平台无缝集成 | 第31页 |
3.3.3 系统的现网部署 | 第31-32页 |
3.3.4 大数据分析平台的网络拓扑图 | 第32-34页 |
3.4 本章小结 | 第34-35页 |
4 电信大数据分析平台的实现 | 第35-55页 |
4.1 周期性数据统计需求的实现 | 第35-41页 |
4.2 实时数据查询需求的实现 | 第41-47页 |
4.3 中间件的实现 | 第47-52页 |
4.4 复杂模型数据分析需求的实现 | 第52-54页 |
4.5 本章小结 | 第54-55页 |
5 电信大数据分析平台的优化与展示 | 第55-79页 |
5.1 Hadoop底层linux优化 | 第55-56页 |
5.2 周期性统计类业务的优化与验证 | 第56-61页 |
5.3 实时查询类业务的优化与验证 | 第61-63页 |
5.4 电信大数据平台的展示 | 第63-78页 |
5.4.1 首页 | 第63-64页 |
5.4.2 业务负荷 | 第64-65页 |
5.4.3 用户感知 | 第65-67页 |
5.4.4 实时监控 | 第67-68页 |
5.4.5 网络质量分析 | 第68-70页 |
5.4.6 安全问题分析 | 第70-72页 |
5.4.7 投诉处理 | 第72-73页 |
5.4.8 关键指标聚类分析 | 第73-78页 |
5.5 本章小结 | 第78-79页 |
6 总结与展望 | 第79-82页 |
6.1 总结 | 第79-80页 |
6.2 展望 | 第80-82页 |
参考文献 | 第82-84页 |
致谢 | 第84-85页 |
攻读学位期间发表的学术论文目录 | 第85页 |