一种针对Deep Web深层数据获取的网络爬虫设计与实现
摘要 | 第1-6页 |
Abstract | 第6-10页 |
第一章 绪论 | 第10-15页 |
·研究背景意义 | 第10页 |
·研究现状 | 第10-14页 |
·Deep Web概况 | 第10-12页 |
·Deep Web查询接口检测 | 第12-13页 |
·Deep Web查询结果抽取 | 第13-14页 |
·本文的贡献 | 第14页 |
·论文的内容及组织结构 | 第14-15页 |
第二章 Deep Web技术基础 | 第15-22页 |
·正则表达式 | 第15-16页 |
·Java处理正则表达式 | 第16-17页 |
·HtmlParser | 第17-18页 |
·HttpClient | 第18-19页 |
·页面相似度计算 | 第19-20页 |
·网页噪声去除 | 第20-22页 |
第三章 Deep Web数据检测与抽取模型 | 第22-29页 |
·Deep Web数据检测模型 | 第22-25页 |
·Deep Web查询接口匹配 | 第22-24页 |
·Deep Web查询接口的验证 | 第24-25页 |
·Deep Web查询接口的存储 | 第25页 |
·Deep Web数据抽取模型 | 第25-28页 |
·查询请求发送 | 第26页 |
·链接分析 | 第26-27页 |
·查询结果抽取 | 第27-28页 |
·本章小结 | 第28-29页 |
第四章 Deep Web网络爬虫的设计与实现 | 第29-39页 |
·Deep Web网络爬虫的系统架构 | 第29-30页 |
·网页文本下载模块 | 第30-32页 |
·页面处理模块 | 第32-37页 |
·Deep Web查询结果抽取模块 | 第37-39页 |
第五章 实验与测试 | 第39-43页 |
·实验环境 | 第39页 |
·参数设置 | 第39页 |
·实验方案、结果与分析 | 第39-43页 |
第六章 结束语 | 第43-45页 |
·本文贡献 | 第43页 |
·进一步研究方向 | 第43-45页 |
参考文献 | 第45-48页 |
在校期间科研经历 | 第48-49页 |
致谢 | 第49页 |