摘要 | 第4-5页 |
Abstract | 第5页 |
1 绪论 | 第8-14页 |
1.1 课题研究背景及意义 | 第8-9页 |
1.2 国内外研究现状 | 第9-11页 |
1.2.1 主题搜索引擎研究现状 | 第9-10页 |
1.2.2 主题搜索引擎在农林领域的研究现状 | 第10-11页 |
1.3 论文研究内容及技术路线 | 第11-13页 |
1.3.1 论文的研究内容 | 第11-12页 |
1.3.2 研究的技术路线 | 第12-13页 |
1.4 论文组织结构 | 第13-14页 |
2 分布式主题搜索引擎相关理论 | 第14-24页 |
2.1 主题搜索引擎 | 第14-16页 |
2.1.1 通用搜索引擎原理 | 第14-15页 |
2.1.2 主题搜索引擎原理 | 第15-16页 |
2.2 主题搜索引擎相关技术 | 第16-21页 |
2.2.1 主题信息采集 | 第16-17页 |
2.2.2 主题表示方法 | 第17-19页 |
2.2.3 主题爬虫搜索策略 | 第19-21页 |
2.3 分布式爬虫系统 | 第21-23页 |
2.3.1 主从分布式爬虫系统 | 第21-22页 |
2.3.2 对等分布式爬虫系统 | 第22-23页 |
2.4 本章小结 | 第23-24页 |
3 分布式爬虫任务调度策略的研究 | 第24-32页 |
3.1 分布式爬虫任务调度策略 | 第24-26页 |
3.1.1 一致性哈希算法 | 第24-25页 |
3.1.2 基于虚拟节点的一致性哈希算法 | 第25-26页 |
3.2 基于SP-cycle的一致性哈希算法改进 | 第26-29页 |
3.2.1 SP-cycle算法简介 | 第27-28页 |
3.2.2 基于SP-cycle改进的节点地址分配策略 | 第28-29页 |
3.3 实验与结果分析 | 第29-31页 |
3.4 本章小结 | 第31-32页 |
4 病虫害主题搜索关键技术研究 | 第32-44页 |
4.1 病虫害主题表示 | 第32-35页 |
4.1.1 主题词库的构建 | 第32-34页 |
4.1.2 病虫害的主题表示 | 第34-35页 |
4.2 主题爬虫的搜索策略研究 | 第35-39页 |
4.2.1 Hits算法和Shark-Search算法 | 第36-38页 |
4.2.2 融合链接和内容的主题搜索策略 | 第38-39页 |
4.3 基于主题的文本分词方法 | 第39-43页 |
4.3.1 通用文本分词方法 | 第40-41页 |
4.3.2 基于主题的文本分词方法 | 第41-43页 |
4.4 本章小结 | 第43-44页 |
5 病虫害主题搜索引擎的实现及结果分析 | 第44-50页 |
5.1 主题搜索引擎的实现 | 第44-47页 |
5.1.1 系统设计目标 | 第44页 |
5.1.2 系统总体框架 | 第44-46页 |
5.1.3 界面展示 | 第46-47页 |
5.2 检索结果与分析 | 第47-49页 |
5.3 本章小结 | 第49-50页 |
结论 | 第50-51页 |
参考文献 | 第51-54页 |
攻读学位期间发表的学术论文 | 第54-55页 |
致谢 | 第55-56页 |