摘要 | 第1-6页 |
Abstract | 第6-10页 |
第1章 绪论 | 第10-17页 |
·课题研究的目的及意义 | 第10-11页 |
·国内外相关技术发展现状 | 第11-15页 |
·通用网络爬虫发展现状 | 第11-13页 |
·主题网络爬虫发展现状 | 第13-15页 |
·本文主要研究内容 | 第15-17页 |
第2章 主题表示及相关性判断研究 | 第17-31页 |
·主题爬虫技术原理 | 第17-19页 |
·主题表示技术 | 第19-21页 |
·主题相关性判断方法 | 第21-28页 |
·基于链接结构的主题相关性判断 | 第22-24页 |
·基于网页内容的主题相关性判断 | 第24-26页 |
·主题相关性计算 | 第26-28页 |
·实验及结果分析 | 第28-30页 |
·本章小结 | 第30-31页 |
第3章 基于改进Shark-Search 的主题搜索策略 | 第31-53页 |
·主题搜索策略算法 | 第31-33页 |
·Best First Search 算法 | 第31-32页 |
·Fish-Search 算法 | 第32页 |
·Shark-Search 算法 | 第32-33页 |
·Shark-Search 算法分析 | 第33-37页 |
·主题相关性预测 | 第37-41页 |
·URL 地址的主题相关性分析 | 第37-40页 |
·Shark-Search 中主题预测方法的改进 | 第40-41页 |
·主题爬虫隧道技术分析 | 第41-45页 |
·主题搜索中隧道难题 | 第41-42页 |
·隧道技术分析 | 第42-45页 |
·改进的Shark-Search 搜索策略算法 | 第45-48页 |
·实验与结果分析 | 第48-52页 |
·评价方法 | 第48-49页 |
·实验结果 | 第49-52页 |
·本章小结 | 第52-53页 |
第4章 主题网络爬虫系统设计 | 第53-61页 |
·主题爬虫系统设计 | 第53-59页 |
·主题爬虫体系结构 | 第53-54页 |
·种子网页获取模块 | 第54-55页 |
·主题表示模块 | 第55-56页 |
·网页抓取模块 | 第56-57页 |
·网页解析模块 | 第57页 |
·主题相关性分析模块 | 第57页 |
·主题预测模块 | 第57-58页 |
·网页存储模块 | 第58-59页 |
·爬虫系统性能测试 | 第59-60页 |
·本章小结 | 第60-61页 |
结论 | 第61-63页 |
参考文献 | 第63-68页 |
致谢 | 第68页 |