基于IP网络的通用数据采集系统的设计与实现
| 摘要 | 第4-5页 |
| ABSTRACT | 第5页 |
| 目录 | 第6-9页 |
| 第一章 绪论 | 第9-12页 |
| 1.1 背景和意义 | 第9-10页 |
| 1.2 研究工作 | 第10-11页 |
| 1.3 论文结构 | 第11-12页 |
| 第二章 报文软件采集机制 | 第12-23页 |
| 2.1 网络流量采集方法 | 第12-13页 |
| 2.2 软件采集机制 | 第13-14页 |
| 2.3 报文采集底层原理 | 第14-18页 |
| 2.3.1 Linux协议栈基础知识 | 第14-15页 |
| 2.3.2 Linux网卡驱动原理 | 第15-16页 |
| 2.3.3 Linux网卡驱动NAPI技术 | 第16-17页 |
| 2.3.4 Linux套接字报文采集原理 | 第17-18页 |
| 2.4 高性能采集技术 | 第18-20页 |
| 2.4.1 PF_RING报文采集技术 | 第18页 |
| 2.4.2 零拷贝报文采集技术 | 第18-19页 |
| 2.4.3 DPDK平台报文采集技术 | 第19-20页 |
| 2.5 数据采集环境分析 | 第20-23页 |
| 2.5.1 移动数据环境要求 | 第20-21页 |
| 2.5.2 高速链路的普及 | 第21页 |
| 2.5.3 硬件平台升级 | 第21-22页 |
| 2.5.4 总结 | 第22-23页 |
| 第三章 通用数据采集框架 | 第23-40页 |
| 3.1 系统总体设计 | 第23-25页 |
| 3.1.1 系统设计关键问题 | 第23-24页 |
| 3.1.2 总体设计方案 | 第24-25页 |
| 3.1.3 系统总体优势 | 第25页 |
| 3.2 插件式报文解析设计 | 第25-36页 |
| 3.2.1 解决的问题 | 第26页 |
| 3.2.2 设计方案 | 第26-29页 |
| 3.2.3 模块特色 | 第29-30页 |
| 3.2.4 内存管理子模块 | 第30-32页 |
| 3.2.5 插件式解析子模块 | 第32-34页 |
| 3.2.6 报文发送子模块 | 第34-36页 |
| 3.3 业务解析模块设计 | 第36-40页 |
| 3.3.1 实现分析 | 第36-37页 |
| 3.3.2 流记录报文关联模块 | 第37-40页 |
| 第四章 高性能报文采集 | 第40-56页 |
| 4.1 报文采集技术实现和分析 | 第40-47页 |
| 4.1.1 传统采集方法实现 | 第40-41页 |
| 4.1.2 零拷贝技术实现 | 第41-43页 |
| 4.1.3 PF_RING技术 | 第43-47页 |
| 4.2 采集技术性能比较和测试 | 第47-50页 |
| 4.2.1 各类采集技术性能分析 | 第47-49页 |
| 4.2.2 采集技术性能测试方法 | 第49-50页 |
| 4.3 测试结果及其分析 | 第50-56页 |
| 4.3.1 各类技术采集性能比较 | 第50-51页 |
| 4.3.2 PF_RING和零拷贝系统性能比较 | 第51-53页 |
| 4.3.3 采集技术选择和优化 | 第53-56页 |
| 第五章 多核平台优化及性能测试 | 第56-66页 |
| 5.1 多核平台优化策略 | 第56-59页 |
| 5.1.1 多核优化目标 | 第56-57页 |
| 5.1.2 多路并行处理 | 第57-58页 |
| 5.1.3 处理器亲和性 | 第58-59页 |
| 5.2 多核平台优化测试 | 第59-65页 |
| 5.2.1 多进程分发性能分析 | 第59-60页 |
| 5.2.2 绑核性能分析 | 第60-61页 |
| 5.2.3 现网部署性能分析 | 第61-63页 |
| 5.2.4 DPDK绑核性能分析 | 第63-65页 |
| 5.3 多核方案选择和改进方向 | 第65-66页 |
| 第六章 总结与展望 | 第66-67页 |
| 参考文献 | 第67-69页 |
| 致谢 | 第69页 |
