基于Nutch的节能减排垂直搜索引擎的设计与实现
摘要 | 第3-4页 |
Abstract | 第4-5页 |
第一章 绪论 | 第8-14页 |
1.1 课题的背景和意义 | 第8-9页 |
1.2 搜索引擎发展历史 | 第9页 |
1.3 国内外研究现状 | 第9-11页 |
1.3.1 国外研究现状 | 第10-11页 |
1.3.2 国内研究现状 | 第11页 |
1.4 研究的主要内容 | 第11-12页 |
1.5 论文的组织结构 | 第12-14页 |
第二章 垂直搜索引擎原理及Nutch技术 | 第14-27页 |
2.1 搜索引擎概述 | 第14-17页 |
2.1.1 通用搜索引擎 | 第14-15页 |
2.1.2 垂直搜索引擎 | 第15页 |
2.1.3 搜索引擎原理结构 | 第15-16页 |
2.1.4 垂直搜索引擎与通用搜索引擎的比较 | 第16-17页 |
2.2 垂直搜索引擎关键技术 | 第17-23页 |
2.2.1 信息抓取技术 | 第17-20页 |
2.2.2 信息抽取技术 | 第20-21页 |
2.2.3 索引技术 | 第21-22页 |
2.2.4 中文分词技术 | 第22-23页 |
2.3 Nutch相关技术 | 第23-27页 |
2.3.1 Nutch简介 | 第23-24页 |
2.3.2 Nutch系统架构 | 第24-26页 |
2.3.3 Nutch插件机制 | 第26-27页 |
第三章 垂直搜索引擎的实现 | 第27-46页 |
3.1 搜索引擎总架构设计 | 第27-29页 |
3.1.1 搜索引擎体系结构 | 第27-28页 |
3.1.2 搜索引擎设计思路 | 第28-29页 |
3.2 网络爬虫设计 | 第29-32页 |
3.2.1 Nutch网络爬虫的搭建 | 第30-31页 |
3.2.2 初始URL种子设定 | 第31-32页 |
3.3 网页模板技术的实现 | 第32-34页 |
3.3.1 网页的特征 | 第32-33页 |
3.3.2 网页模板的设计 | 第33-34页 |
3.4 特征词库的确定 | 第34-37页 |
3.4.1 权重的计算方法 | 第35-36页 |
3.4.2 特征词库选择步骤 | 第36-37页 |
3.5 主题相关性判别的实现 | 第37-40页 |
3.5.1 向量空间模型 | 第37-39页 |
3.5.2 主题相关性判别方法 | 第39-40页 |
3.6 网页信息分类的实现 | 第40-44页 |
3.6.1 朴素贝叶斯分类算法 | 第41-42页 |
3.6.2 网页信息分类方法 | 第42-44页 |
3.7 用户检索接口功能扩展 | 第44-46页 |
第四章 垂直搜索引擎系统管理平台的设计与实现 | 第46-55页 |
4.1 系统管理平台需求分析 | 第46-47页 |
4.2 系统管理平台系统设计 | 第47-55页 |
4.2.1 系统功能模块设计 | 第47-51页 |
4.2.2 数据库设计 | 第51-55页 |
第五章 系统运行和测试 | 第55-66页 |
5.1 系统运行条件 | 第55页 |
5.2 垂直搜索引擎测试和分析 | 第55-60页 |
5.2.1 系统的运行 | 第55-57页 |
5.2.2 系统相关测试 | 第57-60页 |
5.3 垂直搜索引擎管理平台测试和分析 | 第60-66页 |
5.3.1 管理平台运行 | 第60页 |
5.3.2 主要模块功能测试 | 第60-66页 |
第六章 总结与展望 | 第66-68页 |
6.1 总结 | 第66-67页 |
6.2 展望 | 第67-68页 |
参考文献 | 第68-71页 |
在学研究成果 | 第71-72页 |
致谢 | 第72页 |