可定制的聚焦网络爬虫
| 摘要 | 第1-7页 |
| Abstract | 第7-10页 |
| 第一章 绪论 | 第10-15页 |
| ·背景 | 第10-12页 |
| ·现状 | 第12-13页 |
| ·本文工作 | 第13-14页 |
| ·本文结构 | 第14-15页 |
| 第二章 网络爬虫原理及分析 | 第15-19页 |
| ·搜索引擎的原理 | 第15-16页 |
| ·聚焦网络爬虫 | 第16-17页 |
| ·可定制的聚焦网络爬虫 | 第17-18页 |
| ·小结 | 第18-19页 |
| 第三章 web页面解析 | 第19-28页 |
| ·网页获取与链接提取 | 第19-20页 |
| ·网页特征词提取 | 第20-23页 |
| ·文本相似度计算 | 第23-24页 |
| ·网页分类 | 第24-26页 |
| ·小结 | 第26-28页 |
| 第四章 链接的评价技术 | 第28-37页 |
| ·基于链接结构的评价方法 | 第28-32页 |
| ·基于网页内容的评价方法 | 第32-33页 |
| ·锚文本上下文提取 | 第33-36页 |
| ·小结 | 第36-37页 |
| 第五章 CFC分析与设计 | 第37-53页 |
| ·主题定制策略 | 第37-40页 |
| ·Ajax页面解析 | 第40-47页 |
| ·隧道穿越 | 第47-50页 |
| ·爬行策略 | 第50-51页 |
| ·小结 | 第51-53页 |
| 第六章 CFC实现 | 第53-66页 |
| ·聚焦爬虫构架 | 第53页 |
| ·Heritrix | 第53-58页 |
| ·JRex | 第58-59页 |
| ·系统运行 | 第59-65页 |
| ·小结 | 第65-66页 |
| 第七章 总结与展望 | 第66-68页 |
| ·本文总结 | 第66-67页 |
| ·未来展望 | 第67-68页 |
| 参考文献 | 第68-71页 |
| 攻读学位期间发表论文 | 第71-72页 |
| 感谢 | 第72页 |