垂直搜索引擎的研究与实现
| 致谢 | 第1-6页 |
| 中文摘要 | 第6-7页 |
| ABSTRACT | 第7-10页 |
| 1 绪论 | 第10-14页 |
| ·通用搜索引擎概述 | 第10-12页 |
| ·搜索引擎定义 | 第10页 |
| ·搜索引擎的分类 | 第10-11页 |
| ·通用搜索引擎的不足 | 第11-12页 |
| ·垂直搜索引擎的研究意义 | 第12-14页 |
| ·垂直搜索引擎的定义 | 第12页 |
| ·垂直搜索引擎的优势 | 第12页 |
| ·垂直搜索引擎的研究现状 | 第12-14页 |
| 2 搜索引擎技术概述 | 第14-27页 |
| ·搜索引擎的工作原理及体系结构 | 第14-18页 |
| ·网页信息搜集模块 | 第14-15页 |
| ·预处理模块 | 第15-17页 |
| ·查询服务模块 | 第17-18页 |
| ·搜索引擎核心技术 | 第18-27页 |
| ·Spider技术 | 第18-21页 |
| ·中文分词技术 | 第21-23页 |
| ·网页排名技术 | 第23-27页 |
| 3 垂直搜索引擎关键技术 | 第27-35页 |
| ·专业网络爬虫技术 | 第27-30页 |
| ·专业网络爬虫工作原理及关键技术概述 | 第27-28页 |
| ·主题描述 | 第28页 |
| ·主题相关度判定 | 第28-30页 |
| ·网页搜索策略 | 第30页 |
| ·网页的结构化信息抽取技术 | 第30-35页 |
| ·信息抽取技术概述 | 第31页 |
| ·信息抽取技术的评价标准 | 第31-32页 |
| ·Web页面信息抽取技术概述 | 第32页 |
| ·Web信息抽取关键技术 | 第32-33页 |
| ·Web信息抽取方法: | 第33-35页 |
| 4 专业爬虫的设计与实现 | 第35-48页 |
| ·专业爬虫系统设计 | 第35-41页 |
| ·专业爬虫体系结构 | 第35-36页 |
| ·主题确立模块 | 第36-37页 |
| ·网页抓取模块 | 第37页 |
| ·主题相关度分析模块 | 第37-38页 |
| ·主题预测模块 | 第38-40页 |
| ·网页分析模块 | 第40页 |
| ·网页排序模块 | 第40-41页 |
| ·专业爬虫的实现 | 第41-44页 |
| ·URL管理器 | 第41-42页 |
| ·页面抓取器 | 第42-43页 |
| ·网页解析器 | 第43页 |
| ·主题判别器 | 第43-44页 |
| ·主题预测器 | 第44页 |
| ·性能测试及结果分析 | 第44-48页 |
| ·测试指标 | 第44页 |
| ·测试方法 | 第44-45页 |
| ·测试结果与分析 | 第45-48页 |
| 5 结构化信息抽取模块的设计与实现 | 第48-52页 |
| ·系统结构 | 第48页 |
| ·数据预处理模块 | 第48-50页 |
| ·概述 | 第48-49页 |
| ·HTML到XML的转换 | 第49页 |
| ·中文分词 | 第49-50页 |
| ·数据抽取模块 | 第50-52页 |
| ·概述 | 第50页 |
| ·抽取规则的定义 | 第50-51页 |
| ·信息抽取的执行 | 第51-52页 |
| 6 总结 | 第52-53页 |
| 参考文献 | 第53-54页 |
| 作者简历 | 第54-56页 |
| 学位论文数据集 | 第56页 |