摘要 | 第4-5页 |
ABSTRACT | 第5页 |
第一章 绪论 | 第8-12页 |
1.1 课题研究背景 | 第8页 |
1.2 国内外发展现状及研究意义 | 第8-9页 |
1.3 论文结构 | 第9-12页 |
第二章 HTTP协议及云平台概述 | 第12-22页 |
2.1 万维网简述 | 第12-14页 |
2.1.1 万维网结构 | 第12-13页 |
2.1.2 万维网相关术语 | 第13-14页 |
2.2 HTTP协议简述 | 第14-18页 |
2.2.1 HTTP工作原理 | 第14-16页 |
2.2.2 HTTP报文特点 | 第16-18页 |
2.3 Hadoop分布式大数据处理与分析平台 | 第18-21页 |
2.3.1 Hadoop原理与机制 | 第19页 |
2.3.2 HDFS简述 | 第19页 |
2.3.3 MapReduce编程模型 | 第19-21页 |
2.4 本章小结 | 第21-22页 |
第三章 HTTP协议采集软件设计与实现 | 第22-32页 |
3.1 采集系统概述 | 第22-25页 |
3.1.1 采集器部署环境 | 第22-23页 |
3.1.2 采集系统结构 | 第23-24页 |
3.1.3 HTTP采集模块结构 | 第24-25页 |
3.2 HTTP协议采集模块设计与实现 | 第25-30页 |
3.2.1 匹配逻辑设计 | 第25-26页 |
3.2.2 TCP/IP分片重组逻辑设计 | 第26-27页 |
3.2.3 HTTP首部提取设计 | 第27-28页 |
3.2.4 应答报文HTML内容提取 | 第28-30页 |
3.3 本章小结 | 第30-32页 |
第四章 采集系统性能测试与优化提升 | 第32-44页 |
4.1 HTTP采集模块性能测试 | 第32-37页 |
4.1.1 影响系统性能的因素 | 第32-33页 |
4.1.2 性能加性测试 | 第33-37页 |
4.2 报文解析性能优化与提升 | 第37-43页 |
4.2.1 配置分发提升性能 | 第37-38页 |
4.2.2 多模算法提速解析首部 | 第38-42页 |
4.2.3 HTML内容解析性能优化 | 第42-43页 |
4.3 本章小结 | 第43-44页 |
第五章 基于HTTP话单的报文流量特征与用户行为分析 | 第44-56页 |
5.1 核心网流量与报文特征分析 | 第44-49页 |
5.1.1 核心网流量散点图分析 | 第44-45页 |
5.1.2 核心网HTTP报文特征分析 | 第45-49页 |
5.2 校园网流量分析 | 第49-53页 |
5.2.1 校园网用户流量分析 | 第49-51页 |
5.2.2 分位点GK算法在流量分析中的应用 | 第51-53页 |
5.3 基于HTTP话单的斗鱼用户留存及操作行为分析 | 第53-55页 |
5.3.1 斗鱼用户留存分析 | 第53-54页 |
5.3.2 斗鱼用户操作行为分析 | 第54-55页 |
5.4 本章小结 | 第55-56页 |
第六章 总结与展望 | 第56-58页 |
参考文献 | 第58-60页 |
致谢 | 第60-62页 |
攻读学位期间发表的学术论文目录 | 第62页 |