摘要 | 第5-6页 |
ABSTRACT | 第6页 |
第一章 绪论 | 第11-17页 |
1.1 引言 | 第11-12页 |
1.2 搜索引擎的发展概况 | 第12-14页 |
1.3 国内外研究及发展现状 | 第14-15页 |
1.4 基于电路课程的主题搜索引擎的设计与本文组织结构 | 第15-17页 |
第二章 主题搜索引擎的关键技术 | 第17-29页 |
2.1 主题搜索引擎功能模块 | 第17-18页 |
2.2 中文分词技术 | 第18-21页 |
2.3 专业爬虫技术 | 第21-26页 |
2.3.1 专业搜索引擎中网络蜘蛛模型 | 第21-23页 |
2.3.2 目前主题网络蜘蛛所存在的问题 | 第23-25页 |
2.3.3 普通爬虫和主题爬虫对比 | 第25-26页 |
2.4 网页抽取技术 | 第26-29页 |
2.4.1 信息抽取技术概述 | 第27页 |
2.4.2 信息抽取技术的评价标准 | 第27-29页 |
第三章 主题搜索引擎框架设计 | 第29-56页 |
3.1 信息采集模块 | 第30-44页 |
3.1.1 Robots.txt 和META 标签 | 第31-35页 |
3.1.2 链接过滤 | 第35-36页 |
3.1.3 主题网络蜘蛛的算法选择 | 第36-44页 |
3.1.3.1 主题网络蜘蛛的性能评价 | 第36页 |
3.1.3.2 主题网络蜘蛛算法 | 第36-44页 |
3.1.4 页面访问 | 第44页 |
3.2 主题词 | 第44-46页 |
3.2.1 主题词的选择及设置 | 第44-46页 |
3.2.2 根据主题词及其权值改变搜索顺序 | 第46页 |
3.3 权重网页和聚合网页 | 第46-49页 |
3.3.1 权重网页和聚合网页选择计算公式 | 第48页 |
3.3.2 权重网页和聚合网页的选择算法 | 第48-49页 |
3.4 查询模块 | 第49-51页 |
3.4.1 基于MVC 模式的查询子系统 | 第50-51页 |
3.5 详细设计与实现步骤 | 第51-55页 |
3.6 本章小结 | 第55-56页 |
第四章 主题搜索引擎在电路课程中的应用 | 第56-72页 |
4.1 开放源代码Lucene | 第56-61页 |
4.1.1 Lucene 简介 | 第56-57页 |
4.1.2 选用Lucene 的原因 | 第57-58页 |
4.1.3 Lucene 框架构成 | 第58-61页 |
4.1.4 Lucene 在本文中的应用 | 第61页 |
4.2 运行环境 | 第61-62页 |
4.3 Esearch 系统搭建 | 第62-63页 |
4.4 抓取系统(Spider) | 第63-68页 |
4.4.1 网页抓取性能分析 | 第66-68页 |
4.5 搜索性能分析 | 第68-69页 |
4.6 Ajax 技术的使用 | 第69-70页 |
4.7 本章小结 | 第70-72页 |
第五章 总结与展望 | 第72-74页 |
参考文献 | 第74-78页 |
附录1 Spider 起始判断模块 | 第78-79页 |
附录2 Spider 分析页面处理代码模块 | 第79-80页 |
附录3 Spider 下载线程代码模块 | 第80-81页 |
附录4 建立索引模块代码 | 第81-82页 |
致谢 | 第82-83页 |
攻读硕士学位期间已录用的学术论文 | 第83-86页 |
上海交通大学学位论文答辩决议书 | 第86页 |