搜索引擎设计分析与结果聚类改进
前言 | 第1-5页 |
摘要 | 第5-6页 |
Abstract | 第6-13页 |
第一章 绪论 | 第13-25页 |
·问题的提出 | 第13-18页 |
·搜索引擎发展历史 | 第13-15页 |
·萌芽期 | 第13页 |
·第一代搜索引擎—目录式搜索引擎 | 第13页 |
·第二代搜索引擎—机器人搜索引擎 | 第13-15页 |
·第三代搜索引擎—智能化搜索引擎 | 第15页 |
·研究现状 | 第15-16页 |
·搜索引擎的发展趋势 | 第16-18页 |
·搜索引擎原理 | 第18-22页 |
·搜索引擎的工作原理 | 第18-20页 |
·搜索引擎采用的主要技术 | 第20-22页 |
·网络蜘蛛 | 第20页 |
·信息获取模型 | 第20页 |
·文档预处理 | 第20-21页 |
·文件索引与索引压缩 | 第21页 |
·排序技术 | 第21-22页 |
·搜索技术 | 第22页 |
·搜索引擎系统的性能评价 | 第22页 |
·课题的研究意义 | 第22-23页 |
·本论文所做的主要工作 | 第23页 |
·本论文的章节安排 | 第23-25页 |
第二章 索引与搜索 | 第25-51页 |
·索引概述 | 第25-27页 |
·搜索概述 | 第27-28页 |
·系统结构设计 | 第28-30页 |
·系统的总体结构 | 第28页 |
·数据流分析 | 第28-30页 |
·索引文件格式 | 第30-41页 |
·索引文件采用的基本数据类型 | 第30-31页 |
·索引文件的结构 | 第31-33页 |
·索引文件格式 | 第33-41页 |
·索引包含的文件 | 第34-35页 |
·段包含的文件 | 第35-37页 |
·词项字典 | 第37-41页 |
·优先队列的概念及其应用 | 第41-42页 |
·索引建立及搜索过程 | 第42-50页 |
·索引的建立 | 第42-46页 |
·索引建立流程 | 第42-43页 |
·分析器 | 第43-44页 |
·文档的格式 | 第44页 |
·索引的建立实例 | 第44-46页 |
·搜索过程 | 第46-50页 |
·搜索的流程 | 第46-47页 |
·检索工具类 | 第47-48页 |
·构建各种查询 | 第48-49页 |
·搜索过程 | 第49-50页 |
·本章小结 | 第50-51页 |
第三章 搜索引擎设计实例分析 | 第51-73页 |
·体系结构设计 | 第51-53页 |
·系统的总体结构 | 第51-52页 |
·工作流程概述 | 第52-53页 |
·文件的存储结构 | 第53-54页 |
·Nutch常用技术说明 | 第54-60页 |
·插件技术 | 第54-58页 |
·插件的体系结构 | 第54页 |
·插件的相关概念 | 第54-57页 |
·插件的编写实例 | 第57页 |
·插件的运行过程 | 第57-58页 |
·Hadoop技术 | 第58-60页 |
·hadoop的Map/Reduce | 第59-60页 |
·hadoop的DFS(HDFS) | 第60页 |
·Nutch采用的主要数据结构 | 第60-65页 |
·Trie树 | 第60-62页 |
·后缀树 | 第62-65页 |
·后缀树的构造及其应用 | 第63-64页 |
·利用后缀树查找串S中的最长重复子串 | 第64-65页 |
·搜索引擎的工作流程 | 第65-72页 |
·对局域网的搜索 | 第65-66页 |
·向WebDB中注入urls地址的过程 | 第66-67页 |
·fetchlist的生成过程 | 第67页 |
·从url中获取网页的相关内容(网络蜘蛛) | 第67-69页 |
·页面内容获取 | 第68页 |
·页面内容的解析 | 第68-69页 |
·链接分析 | 第69-70页 |
·索引的建立过程 | 第70-71页 |
·搜索过程 | 第71-72页 |
·本章小结 | 第72-73页 |
第四章 对Nutch搜索引擎聚类的改进 | 第73-94页 |
·文本的表示 | 第73-80页 |
·文本特征表示 | 第73-74页 |
·文本特征提取 | 第74-80页 |
·基本概念 | 第74-75页 |
·后缀数组 | 第75-80页 |
·对Nutch结构的更改 | 第80-82页 |
·修改后的Nutch结构概图 | 第80-81页 |
·页面的预处理 | 第81页 |
·文档语义内容的表示 | 第81页 |
·对Nutch索引文件的修改 | 第81-82页 |
·对Nutch搜索部分的修改 | 第82页 |
·Nuteh聚类的实现 | 第82-89页 |
·聚类综述 | 第82-83页 |
·Nutch聚类算法的实现 | 第83-89页 |
·LSI分析 | 第84-88页 |
·lingo聚类算法的实现 | 第88-89页 |
·在Nutch中调用聚类搜索接口 | 第89-91页 |
·试验结果 | 第91-93页 |
·聚类结果的评价 | 第93页 |
·本章小结 | 第93-94页 |
第五章 总结及展望 | 第94-95页 |
致谢 | 第95-96页 |
参考文献 | 第96-100页 |
攻读硕士期间的研究成果及发表的学术论文 | 第100页 |