摘要 | 第5-6页 |
ABSTRACT | 第6-7页 |
第一章 绪论 | 第14-22页 |
1.1 课题背景 | 第14-17页 |
1.1.1 搜索技术的诞生与成长 | 第14-16页 |
1.1.2 搜索技术现状 | 第16-17页 |
1.2 课题研究意义 | 第17-19页 |
1.3 国内外研究现状 | 第19-20页 |
1.4 本文研究内容及章节安排 | 第20-22页 |
第二章 分布式搜索相关介绍 | 第22-32页 |
2.1 Heritrix网络爬虫 | 第22页 |
2.2 Lucene技术 | 第22-25页 |
2.3 中文分词技术 | 第25-28页 |
2.4 Hadoop平台 | 第28-30页 |
2.4.1 HDFS存储 | 第28-29页 |
2.4.2 Map-Reduce模型 | 第29-30页 |
2.5 分布式搜素引擎 | 第30-31页 |
2.6 本章小结 | 第31-32页 |
第三章 系统优化策略与评分机制改进 | 第32-38页 |
3.1 系统优化策略 | 第32-35页 |
3.1.1 URL高效处理与过滤 | 第32-33页 |
3.1.2 索引更新优化 | 第33-35页 |
3.2 网页评分机制改进 | 第35-37页 |
3.2.1 已有的网页评分算法 | 第35-36页 |
3.2.2 Lucene固有的网页评分算法 | 第36页 |
3.2.3 基于Lucene固有算法的改进 | 第36-37页 |
3.3 本章小结 | 第37-38页 |
第四章 分布式搜索系统设计与实现 | 第38-60页 |
4.1 系统总体介绍 | 第38-39页 |
4.2 单节点子系统设计与实现 | 第39-51页 |
4.2.1 子系统概述 | 第39页 |
4.2.2 信息采集模块介绍 | 第39-44页 |
4.2.3 信息索引模块介绍 | 第44-48页 |
4.2.4 信息检索模块介绍 | 第48-49页 |
4.2.5 结果展示模块介绍 | 第49-51页 |
4.3 多节点集群系统构建 | 第51-57页 |
4.3.1 Hadoop平台的搭建 | 第51-54页 |
4.3.2 Hadoop平台下分布式索引与搜索的构建 | 第54-57页 |
4.4 系统的准确率分析 | 第57-58页 |
4.5 本章小结 | 第58-60页 |
第五章 总结与展望 | 第60-62页 |
5.1 研究结论 | 第60页 |
5.2 展望 | 第60-62页 |
参考文献 | 第62-64页 |
致谢 | 第64-66页 |
作者简介 | 第66-67页 |