基于主题的WEB信息提取及智能搜索技术研究与实现
摘要 | 第1-7页 |
ABSTRACT | 第7-11页 |
第一章 绪论 | 第11-15页 |
·研究背景及意义 | 第11-14页 |
·本论文主要工作 | 第14页 |
·本论文的组织 | 第14-15页 |
第二章 技术介绍和讨论 | 第15-31页 |
·基于WWW的搜索引擎 | 第15-20页 |
·搜索引擎的组成 | 第15-16页 |
·web crawler | 第16-18页 |
·排序算法 | 第18-20页 |
·web文本信息的表示和特征获取 | 第20页 |
·web文本相关性算法 | 第20-24页 |
·基于元数据的判别 | 第21页 |
·基于链接标签数据的判别 | 第21-22页 |
·基于链接结构分析的判别 | 第22页 |
·基于页面语义信息的判别 | 第22-24页 |
·web文档聚类 | 第24-30页 |
·聚类的过程 | 第25页 |
·聚类的时机 | 第25-26页 |
·距离和相似系数 | 第26-27页 |
·模糊聚类算法 | 第27-29页 |
·聚类算法评价 | 第29-30页 |
·本章小结 | 第30-31页 |
第三章 基于主题的智能搜索系统设计 | 第31-46页 |
·系统框架 | 第32页 |
·基于主题的crawler框架 | 第32-40页 |
·基于页面结构分析的信息提取 | 第33-37页 |
·主题相关性判断 | 第37-40页 |
·模糊 C-均值聚类器 | 第40-45页 |
·FCM算法描述 | 第40-42页 |
·影响 FCM有效性的两个参数 | 第42-44页 |
·FCM算法改进 | 第44-45页 |
·本章小结 | 第45-46页 |
第四章 系统实现 | 第46-68页 |
·页面获取 | 第46-56页 |
·种子集合的产生 | 第47-49页 |
·多线程 Fetch | 第49-53页 |
·网页消重 | 第53-56页 |
·页面分析 | 第56-58页 |
·数据表设计及字典生成 | 第56-58页 |
·页面表示及信息提取 | 第58页 |
·聚类算法的实现 | 第58-65页 |
·改进 FCM实现流程图 | 第59-60页 |
·改进 FCM算法实现 | 第60-64页 |
·算法测试 | 第64-65页 |
·实现中用到的编程技术 | 第65-67页 |
·Socket编程技术 | 第65页 |
·ADO数据库编程 | 第65-67页 |
·Boost库 | 第67页 |
·本章小结 | 第67-68页 |
第五章 总结与展望 | 第68-70页 |
·本文总结 | 第68页 |
·下一步研究工作展望 | 第68-70页 |
致谢 | 第70-71页 |
参考文献 | 第71-75页 |
个人简历 | 第75-76页 |
攻硕期间取得的研究成果 | 第76页 |