搜索引擎中网络爬虫及结果聚类的研究与实现
摘要 | 第1-6页 |
ABSTRACT | 第6-11页 |
第1章 绪论 | 第11-16页 |
·研究背景与意义 | 第11-13页 |
·主要的研究内容及贡献 | 第13-15页 |
·本文组织与结构 | 第15-16页 |
第2章 搜索引擎概述 | 第16-24页 |
·搜索引擎系统架构及工作原理 | 第16-17页 |
·网络爬虫的相关研究 | 第17-21页 |
·爬虫选择原则 | 第18-20页 |
·礼貌爬行策略 | 第20-21页 |
·索引器相关研究 | 第21-22页 |
·索引数据库 | 第21-22页 |
·倒排索引 | 第22页 |
·检索器 | 第22-23页 |
·本章小结 | 第23-24页 |
第3章 基于分段哈希的网络爬虫实现 | 第24-34页 |
·相关研究 | 第24-25页 |
·Weblech系统 | 第25-28页 |
·Weblech的特点 | 第25-26页 |
·Weblech处理流程分析 | 第26-28页 |
·改进的页面解析方法 | 第28-29页 |
·基于分段哈希的爬虫URLs去重方法 | 第29-31页 |
·实验过程及分析 | 第31-33页 |
·本章小结 | 第33-34页 |
第4章 中文搜索结果的短文本在线聚类算法 | 第34-53页 |
·聚类分析概述及评价指标 | 第34-36页 |
·搜索结果的聚类分析 | 第36-37页 |
·Lingo聚类算法的理论背景及实现步骤 | 第37-40页 |
·潜在语义分析及奇异值分解(SVD) | 第37-38页 |
·Lingo算法的实现步骤 | 第38-40页 |
·中文搜索结果的短文本在线聚类算法 | 第40-42页 |
·中文短文本相似性度量 | 第42-46页 |
·改进的编辑距离 | 第42-45页 |
·利用搜索引擎结果的中文语义相似性度量 | 第45-46页 |
·实验及结果分析 | 第46-52页 |
·本章小结 | 第52-53页 |
第5章 总结与展望 | 第53-55页 |
·工作总结 | 第53页 |
·展望 | 第53-55页 |
参考文献 | 第55-58页 |
致谢 | 第58-59页 |
在读期间发表的学术论文与取得的研究成果 | 第59页 |