基于遗传算法的主题爬虫搜索策略研究
| 摘要 | 第1-5页 |
| Abstract | 第5-6页 |
| 目录 | 第6-8页 |
| 第1章 引言 | 第8-14页 |
| ·背景 | 第8页 |
| ·搜索引擎分类 | 第8-10页 |
| ·国内外的发展概况 | 第10-12页 |
| ·搜索引擎未来的发展 | 第12页 |
| ·本文研究内容和创新点 | 第12-13页 |
| ·本文结构安排 | 第13-14页 |
| 第2章 相关研究内容 | 第14-21页 |
| ·搜索引擎体系结构 | 第14-17页 |
| ·下载系统 | 第14-15页 |
| ·分析系统 | 第15-16页 |
| ·索引系统 | 第16页 |
| ·查询系统 | 第16-17页 |
| ·网络爬虫的工作原理 | 第17-18页 |
| ·网络爬虫的搜索策略 | 第18-19页 |
| ·神经网络与遗传算法 | 第19页 |
| ·主题爬虫的设计目标 | 第19-20页 |
| ·本章小结 | 第20-21页 |
| 第3章 主题爬虫的关键技术 | 第21-33页 |
| ·不重复抓取网页策略 | 第21-22页 |
| ·向量空间模型算法 | 第22-24页 |
| ·主题爬虫的搜索策略分类 | 第24-31页 |
| ·基于内容评价的搜索策略 | 第24-26页 |
| ·基于链接结构评价的搜索策略 | 第26-30页 |
| ·基于未来回报的搜索策略 | 第30-31页 |
| ·正向最大匹配分词 | 第31-32页 |
| ·本章小结 | 第32-33页 |
| 第4章 基于遗传算法的主题爬虫的实现 | 第33-43页 |
| ·构造初始群 | 第33-37页 |
| ·交叉 | 第37-38页 |
| ·变异 | 第38-40页 |
| ·选择 | 第40-41页 |
| ·终止搜索 | 第41-42页 |
| ·本章小结 | 第42-43页 |
| 第5章 性能分析 | 第43-53页 |
| ·实验设计 | 第43-47页 |
| ·实验目的 | 第44页 |
| ·实验原理 | 第44-46页 |
| ·VSM模块 | 第46页 |
| ·Authority和Hub计算模块 | 第46-47页 |
| ·实验过程 | 第47-50页 |
| ·基于Best-First算法的实验过程 | 第47-48页 |
| ·基于HITS算法的实验过程 | 第48-49页 |
| ·基于GA算法的实验过程 | 第49-50页 |
| ·实验结果分析 | 第50-52页 |
| ·本章小结 | 第52-53页 |
| 第6章 总结与展望 | 第53-54页 |
| ·本文总结 | 第53页 |
| ·研究展望 | 第53-54页 |
| 参考文献 | 第54-58页 |
| 致谢 | 第58-59页 |
| 附录 | 第59页 |
