摘要 | 第1-5页 |
Abstract | 第5-9页 |
1 绪论 | 第9-16页 |
·课题背景和论文组织 | 第9-10页 |
·搜索引擎的发展状况 | 第10-11页 |
·搜索引擎原理 | 第11-12页 |
·搜索引擎现有模型 | 第12-13页 |
·搜索引擎评价原则和发展趋势 | 第13-15页 |
·小结 | 第15-16页 |
2 搜索引擎的核心技术 | 第16-34页 |
·网页抓取下载技术 | 第17-20页 |
·网络蜘蛛 | 第17-18页 |
·网络蜘蛛的设计实现原理 | 第18-19页 |
·网页采集程序的实现 | 第19-20页 |
·资源文件预处理分析技术 | 第20-23页 |
·网页预处理分析处理 | 第21-22页 |
·其他文档预处理分析 | 第22-23页 |
·基于Nutch文档的分析 | 第23页 |
·文档内容分析与分词处理 | 第23-28页 |
·文档内容分析过程 | 第23-25页 |
·分词技术 | 第25页 |
·常用的分词算法 | 第25-27页 |
·中文分词中的歧义 | 第27-28页 |
·索引和检索技术 | 第28-31页 |
·索引的基本结构 | 第29-30页 |
·索引程序的设计 | 第30-31页 |
·检索程序的设计实现 | 第31页 |
·小结 | 第31-34页 |
3 垂直搜索引擎 | 第34-41页 |
·垂直搜索引擎的发展和原理 | 第34-35页 |
·垂直搜索引擎的设计框架 | 第35-36页 |
·专题信息的抓取下载 | 第36-37页 |
·算法分析 | 第37-40页 |
·Google的pagerank正算法 | 第37-39页 |
·HITS | 第39-40页 |
·小结 | 第40-41页 |
4 面向能源的垂直搜索引擎的系统设计 | 第41-53页 |
·面向能源的垂直搜索引擎需求 | 第41-42页 |
·能源的重要性 | 第41-42页 |
·能源效益和节能 | 第42页 |
·能源与国民经济 | 第42页 |
·HITS算法及其改进在垂直搜索引擎中的应用 | 第42-43页 |
·基于Nutch的有效搜索引擎的设计 | 第43-50页 |
·网页预处理分析 | 第43-46页 |
·JE分词 | 第46-48页 |
·专题训练集 | 第48-49页 |
·锚文本和标题信息过滤 URL形成集合 E | 第49-50页 |
·E中authority值和hub值的计算和网页排序 | 第50页 |
·算法设计策略描述 | 第50-51页 |
·检索的实现 | 第51-52页 |
·界面设计 | 第52页 |
·小结 | 第52-53页 |
5 系统引擎的实现及数据分析 | 第53-57页 |
·测试环境的搭建过程 | 第53-54页 |
·在windows环境下配置和安装Nutch-0.9 | 第53-54页 |
·在Eclipse中加载nutch | 第54页 |
·垂直搜索引擎的衡量标准 | 第54-55页 |
·实验数据分析对比 | 第55-56页 |
·小结 | 第56-57页 |
结论 | 第57-58页 |
参考文献 | 第58-62页 |
攻读硕士学位期间发表学术论文情况 | 第62-63页 |
致谢 | 第63-64页 |