摘要 | 第4-5页 |
ABSTRACT | 第5-6页 |
目录 | 第7-9页 |
第一章 绪论 | 第9-11页 |
1.1 研究背景 | 第9-10页 |
1.2 论文结构 | 第10-11页 |
第二章 Hadoop框架综述 | 第11-19页 |
2.1 Hadoop原理 | 第11-13页 |
2.1.1 HDFS组件 | 第11-12页 |
2.1.2 MapReduce组件 | 第12页 |
2.1.3 工作流程 | 第12-13页 |
2.2 HBase原理 | 第13-19页 |
2.2.1 HBase组件 | 第14-15页 |
2.2.2 数据模型 | 第15-16页 |
2.2.3 物理存储 | 第16页 |
2.2.4 读写流程 | 第16-19页 |
第三章 网络流量数据处理系统 | 第19-23页 |
3.1 系统体系结构 | 第19-21页 |
3.1.1 采集层 | 第20页 |
3.1.2 数据层 | 第20-21页 |
3.1.3 应用层 | 第21页 |
3.2 系统工作流程 | 第21-23页 |
第四章 数据层的非实时组件 | 第23-43页 |
4.1 拟解决的关键问题 | 第23页 |
4.2 系统主要功能 | 第23-24页 |
4.3 系统整体设计 | 第24-27页 |
4.3.1 系统架构 | 第24-25页 |
4.3.2 关键功能与技术 | 第25-27页 |
4.4 关键子模块说明 | 第27-38页 |
4.4.1 数据导入(Data Loader,DL)模块详细设计 | 第27-32页 |
4.4.2 数据分析(Data Analyzer,DA)模块详细设计 | 第32-36页 |
4.4.3 配置文件解析(Config Parser,CP) | 第36-38页 |
4.5 配置文件说明 | 第38-43页 |
4.5.1 系统配置文件 | 第38-42页 |
4.5.2 功能模块配置文件 | 第42-43页 |
第五章 数据层的实时组件 | 第43-71页 |
5.1 拟解决的关键问题 | 第43页 |
5.2 系统主要功能 | 第43页 |
5.3 系统整体设计 | 第43-47页 |
5.3.1 系统架构 | 第43-44页 |
5.3.2 关键功能与技术 | 第44-47页 |
5.4 关键子模块说明 | 第47-55页 |
5.4.1 流记录导入(LI,Log Import)模块详细设计 | 第47-51页 |
5.4.2 流记录查询(LS,Log Searcher)模块详细设计 | 第51-55页 |
5.5 性能测试 | 第55-71页 |
5.5.1 测试环境 | 第55-56页 |
5.5.2 导入性能测试 | 第56-58页 |
5.5.3 查询性能测试 | 第58-71页 |
第六章 智能终端流量特征分析 | 第71-77页 |
6.1 研究背景 | 第71-72页 |
6.2 数据采集 | 第72-73页 |
6.3 流量分析 | 第73-77页 |
6.3.1 流量组成 | 第73-74页 |
6.3.2 在线用户数和流量随时间的分布 | 第74-75页 |
6.3.3 流特征 | 第75-77页 |
第七章 总结与展望 | 第77-79页 |
参考文献 | 第79-81页 |
致谢 | 第81-83页 |
攻读学位期间发表的学术论文目录 | 第83页 |