基于Hadoop的分布式垂直搜索引擎研究与设计
摘要 | 第1-5页 |
ABSTRACT | 第5-8页 |
第一章 绪论 | 第8-12页 |
§1-1 研究背景和意义 | 第8页 |
§1-2 国内外研究现状 | 第8-9页 |
§1-3 搜索引擎发展趋势 | 第9-10页 |
§1-4 研究内容及组织结构 | 第10-12页 |
1-4-1 论文的主要工作 | 第10页 |
1-4-2 论文的组织结构 | 第10-12页 |
第二章 搜索引擎相关理论概述 | 第12-19页 |
§2-1 通用搜索引擎介绍 | 第12-13页 |
2-1-1 通用搜索引擎工作原理 | 第12-13页 |
2-1-2 通用搜索引擎不足之处 | 第13页 |
§2-2 垂直搜索引擎介绍 | 第13-14页 |
2-2-1 垂直搜索引擎的定义 | 第13页 |
2-2-2 与通用搜索引擎比较 | 第13-14页 |
§2-3 与搜索相关的开源组件 | 第14-18页 |
2-3-1 Nutch 和 Solr 简介 | 第14页 |
2-3-2 Nutch 与 Solr 原理 | 第14-17页 |
2-3-3 Hadoop 分布式平台 | 第17-18页 |
§2-4 本章小结 | 第18-19页 |
第三章 搜索引擎关键技术研究 | 第19-25页 |
§3-1 领域本体技术研究 | 第19-20页 |
3-1-1 本体论概述 | 第19页 |
3-1-2 本体构建方法 | 第19-20页 |
3-1-3 本体构建工具 | 第20页 |
§3-2 主题相关度判别研究 | 第20-22页 |
3-2-1 布尔模型 | 第21页 |
3-2-2 向量空间模型 | 第21-22页 |
3-2-3 相关度模型的评价 | 第22页 |
§3-3 通用搜索排序算法研究 | 第22-24页 |
3-3-1 词频位置加权算法 | 第23页 |
3-3-2 PageRank 算法 | 第23页 |
3-3-3 HITS 算法 | 第23-24页 |
3-3-4 排序算法的评价 | 第24页 |
§3-4 本章小结 | 第24-25页 |
第四章 分布式垂直搜索设计与实现 | 第25-41页 |
§4-1 系统总体设计 | 第25-27页 |
4-1-1 系统体系结构 | 第25-26页 |
4-1-2 系统功能模块 | 第26-27页 |
§4-2 网页抓取子系统实现 | 第27-33页 |
4-2-1 起始链接列表 | 第27-29页 |
4-2-2 主题词库构建 | 第29-31页 |
4-2-3 主题相关度判别 | 第31-33页 |
§4-3 网页检索子系统实现 | 第33-40页 |
4-3-1 用户云桌面 | 第33-34页 |
4-3-2 添加中文分词 | 第34-35页 |
4-3-3 领域本体库构建 | 第35-38页 |
4-3-4 本体语义扩展查询 | 第38-39页 |
4-3-5 改进结果排序算法 | 第39-40页 |
§4-4 本章小结 | 第40-41页 |
第五章 系统运行与分析 | 第41-50页 |
§5-1 实验平台 | 第41-45页 |
5-1-1 软硬件环境 | 第41页 |
5-1-2 Hadoop 集群搭建 | 第41-43页 |
5-1-3 Nutch 和 Solr 部署 | 第43-45页 |
§5-2 实验验证 | 第45-49页 |
5-2-1 界面展示 | 第45-47页 |
5-2-2 评价标准 | 第47页 |
5-2-3 结果分析 | 第47-49页 |
§5-3 本章小结 | 第49-50页 |
第六章 总结和展望 | 第50-51页 |
§6-1 论文总结 | 第50页 |
§6-2 论文展望 | 第50-51页 |
参考文献 | 第51-53页 |
致谢 | 第53页 |