致谢 | 第1-6页 |
中文摘要 | 第6-7页 |
ABSTRACT | 第7-9页 |
目录 | 第9-11页 |
1 引言 | 第11-16页 |
·研究背景和意义 | 第11-13页 |
·国内外研究现状 | 第13-14页 |
·主要工作 | 第14页 |
·论文结构 | 第14-16页 |
2 系统相关技术 | 第16-32页 |
·数据采集模块相关技术 | 第16-18页 |
·传统数据包捕获技术种类 | 第16页 |
·Libpcap和PF_RING | 第16-18页 |
·TCP重组模块相关技术 | 第18-22页 |
·TCP/IP模型理论 | 第18-20页 |
·HTTP协议 | 第20-22页 |
·网络安全开发包Libnids | 第22页 |
·Hadoop集群分析模块相关技术 | 第22-30页 |
·分布式文件系统HDFS | 第24-26页 |
·Mapreduce编程模型 | 第26-29页 |
·数据仓库Hive | 第29-30页 |
·数据可视化相关技术 | 第30-31页 |
·本章小结 | 第31-32页 |
3 基于Hadoop用户行为分析系统的分析与概要设计 | 第32-41页 |
·系统需求分析 | 第33页 |
·系统功能和模块概要设计 | 第33-36页 |
·系统功能设计 | 第33-34页 |
·系统模块设计 | 第34-36页 |
·系统各模块的概要设计 | 第36-40页 |
·数据采集模块概要设计 | 第36-37页 |
·TCP重组模块概要设计 | 第37-38页 |
·Hadoop集群分析模块概要设计 | 第38-39页 |
·可视化模块概要设计 | 第39-40页 |
·本章小结 | 第40-41页 |
4 基于Hadoop用户行为分析系统的实现 | 第41-57页 |
·用户数据采集模块 | 第41-43页 |
·PF_RING开发接口函数 | 第41-42页 |
·PF_RING存储分布式化开发 | 第42-43页 |
·TCP重组模块 | 第43-46页 |
·功能综述 | 第43-44页 |
·模块实现 | 第44-46页 |
·Hadoop集群分析模块 | 第46-55页 |
·搜索关键词分析 | 第47-50页 |
·购物趋向分析 | 第50-52页 |
·网站留言分析 | 第52-54页 |
·网站浏览行为分析 | 第54-55页 |
·可视化模块实现 | 第55页 |
·本章小结 | 第55-57页 |
5 系统功能测试 | 第57-65页 |
·平台搭建 | 第57-59页 |
·拓扑结构 | 第57-58页 |
·环境搭建 | 第58-59页 |
·用户行为分析结果展现 | 第59-64页 |
·数据展现 | 第59-64页 |
·本章小结 | 第64-65页 |
6 结束语 | 第65-67页 |
·工作总结 | 第65-66页 |
·工作展望 | 第66-67页 |
参考文献 | 第67-69页 |
作者简历 | 第69-71页 |
学位论文数据集 | 第71页 |