网页数据采集和还原系统设计
| 摘要 | 第1-4页 |
| Abstract | 第4-7页 |
| 第一章 绪论 | 第7-11页 |
| ·论文背景和意义 | 第7-8页 |
| ·国内外研究现状 | 第8页 |
| ·课题来源 | 第8-9页 |
| ·论文主要内容和工作 | 第9页 |
| ·论文结构 | 第9-11页 |
| 第二章 相关背景知识 | 第11-25页 |
| ·HTTP协议 | 第11-17页 |
| ·HTTP协议简介 | 第11-15页 |
| ·HTTP协议分析 | 第15-17页 |
| ·CLAY框架及组成部分 | 第17-21页 |
| ·CLAY简介 | 第17-18页 |
| ·CLAY组成部分 | 第18-21页 |
| ·数据采集及还原技术 | 第21-25页 |
| ·数据采集技术 | 第21-22页 |
| ·数据包重组技术 | 第22-25页 |
| 第三章 网页采集和还原系统设计 | 第25-37页 |
| ·预期目标 | 第25页 |
| ·系统总体框架设计 | 第25-26页 |
| ·数据采集模块设计 | 第26-33页 |
| ·数据捕获模块设计 | 第26-28页 |
| ·场景(有限状态机)分析模块 | 第28-31页 |
| ·数据库存储模块设计 | 第31-33页 |
| ·网页还原模块设计 | 第33-37页 |
| ·Web页面重组技术 | 第33-34页 |
| ·基于有限状态机的网页还原方法 | 第34-37页 |
| 第四章 网页采集和还原系统实现 | 第37-67页 |
| ·数据采集模块实现 | 第37-40页 |
| ·Libpcap工作原理 | 第37页 |
| ·数据包捕获及封装实现 | 第37-40页 |
| ·CLAY下协议分析模块实现 | 第40-46页 |
| ·协议分析研究 | 第40-41页 |
| ·CLAY下协议分析模块实现 | 第41-46页 |
| ·数据存储模块实现 | 第46-57页 |
| ·CLAY核心代码框架 | 第46页 |
| ·CLAY下HTTP场景插件实现 | 第46-52页 |
| ·MySQL数据存储模块实现 | 第52-55页 |
| ·插件加载激活及程序运转 | 第55-57页 |
| ·数据还原模块实现 | 第57-67页 |
| ·数据还原模块实现 | 第57-64页 |
| ·查询模块实现 | 第64-67页 |
| 第五章 系统功能测试 | 第67-71页 |
| ·测试环境搭建 | 第67-68页 |
| ·测试结果及分析 | 第68-71页 |
| 第六章 总结及展望 | 第71-73页 |
| ·总结 | 第71页 |
| ·下一步工作 | 第71-73页 |
| 致谢 | 第73-75页 |
| 参考文献 | 第75-79页 |
| 研究成果 | 第79页 |