主题爬虫搜索策略及关键技术研究
中文摘要 | 第3-4页 |
英文摘要 | 第4-5页 |
1 绪论 | 第8-15页 |
1.1 研究背景 | 第8-9页 |
1.2 研究目的和意义 | 第9页 |
1.3 国内外研究现状 | 第9-14页 |
1.4 本文研究内容和组织结构 | 第14-15页 |
2 主题爬虫的相关技术 | 第15-30页 |
2.1 主题爬虫概述 | 第15-17页 |
2.2 主题页面分布特征 | 第17-18页 |
2.3 主题表示模型 | 第18-19页 |
2.4 主题向量构建 | 第19-22页 |
2.5 主题相关性判断 | 第22-26页 |
2.6 主题爬虫的搜索策略 | 第26-28页 |
2.6.1 PageRank算法 | 第26页 |
2.6.2 OPIC算法 | 第26-27页 |
2.6.3 Shark-Search算法 | 第27-28页 |
2.6.4 OTIE算法 | 第28页 |
2.7 本章小结 | 第28-30页 |
3 基于链接和内容分析的不平均分配算法 | 第30-41页 |
3.1 基于词项语义相似度的向量空间模型 | 第30-33页 |
3.2 自适应隧道穿越技术 | 第33-36页 |
3.3 基于链接和内容分析的不平均分配算法 | 第36-39页 |
3.4 本章小结 | 第39-41页 |
4 实验与分析 | 第41-49页 |
4.1 实验设计 | 第43-45页 |
4.2 实验评价指标 | 第45-46页 |
4.3 实验结果与分析 | 第46-48页 |
4.4 本章小结 | 第48-49页 |
5 总结与展望 | 第49-51页 |
5.1 论文工作总结 | 第49页 |
5.2 后续工作展望 | 第49-51页 |
致谢 | 第51-52页 |
参考文献 | 第52-56页 |
附录 | 第56页 |
A.作者在攻读学位期间发表的论文目录 | 第56页 |
B.作者在攻读硕士学位期间参与项目情况 | 第56页 |