基于P2P的主题爬行与搜索路由研究
| 摘要 | 第1-5页 |
| Abstract | 第5-11页 |
| 第1章 绪论 | 第11-18页 |
| ·引言 | 第11-12页 |
| ·课题研究的目的及意义 | 第12-13页 |
| ·国内外研究现状 | 第13-16页 |
| ·主题搜索引擎 | 第13-15页 |
| ·P2P网络搜索技术 | 第15-16页 |
| ·问题的提出及课题研究内容 | 第16-17页 |
| ·问题的提出 | 第16页 |
| ·主要研究内容 | 第16-17页 |
| ·本文章节介绍 | 第17-18页 |
| 第2章 搜索引擎理论综述 | 第18-26页 |
| ·信息检索技术 | 第18-20页 |
| ·向量空间模型 | 第18-19页 |
| ·TF-IDF算法 | 第19-20页 |
| ·相似度计算 | 第20页 |
| ·面向主题的搜索技术 | 第20-24页 |
| ·主题页面分布规律 | 第20-21页 |
| ·Web页面的检索 | 第21-23页 |
| ·网络爬虫 | 第23-24页 |
| ·分布式搜索技术 | 第24-25页 |
| ·分布式哈希表 | 第24-25页 |
| ·本章小结 | 第25-26页 |
| 第3章 PPSpider框架设计 | 第26-43页 |
| ·主题爬虫PPSpider的网络拓扑结构 | 第26-28页 |
| ·主题爬虫PPSpider基础结构设计 | 第28-42页 |
| ·PPSpider总体框架设计 | 第28-30页 |
| ·网络平台服务层 | 第30-33页 |
| ·网络拓扑维护模块 | 第33-39页 |
| ·对等节点请求分派模块 | 第39-42页 |
| ·本章小结 | 第42-43页 |
| 第4章 PPSpider爬虫功能的设计与实现 | 第43-61页 |
| ·主题爬虫PPSpider的结构 | 第43-44页 |
| ·主题模型的建立与本地初始种子筛选 | 第44-51页 |
| ·主题分类与通用词库建立 | 第45-46页 |
| ·对等节点主题倾向挖掘 | 第46-49页 |
| ·节点初始种子集的改进 | 第49-51页 |
| ·对等节点的URLs分配处理 | 第51-55页 |
| ·基本机制 | 第51-53页 |
| ·对等节点的加入与退出 | 第53-55页 |
| ·PPSpider协同爬行机制与算法 | 第55-60页 |
| ·基本爬行机制 | 第55-57页 |
| ·爬行算法sortURL改进设计 | 第57-60页 |
| ·sortURL机制的进一步思考 | 第60页 |
| ·本章小结 | 第60-61页 |
| 第5章 节点爬行测试与结果分析 | 第61-66页 |
| ·初始种子改进方法测试 | 第61-62页 |
| ·爬行算法测试 | 第62-65页 |
| ·对等节点吞吐率测试 | 第64页 |
| ·对等节点间网络传输开销 | 第64-65页 |
| ·本章小结 | 第65-66页 |
| 第6章 总结与展望 | 第66-68页 |
| ·本文工作总结 | 第66-67页 |
| ·未来研究工作及展望 | 第67-68页 |
| 致谢 | 第68-69页 |
| 参考文献 | 第69-72页 |
| 攻读硕士学位期间主要的研究成果 | 第72页 |
