主题爬虫系统的研究
摘要 | 第1-5页 |
Abstract | 第5-8页 |
第1章 绪论 | 第8-13页 |
·论文的研究背景 | 第8-9页 |
·主题爬虫的研究现状 | 第9-10页 |
·论文的研究意义 | 第10-11页 |
·论文的相关工作 | 第11-12页 |
·论文的安排 | 第12-13页 |
第2章 主题爬虫技术 | 第13-20页 |
·搜索引擎技术 | 第13-14页 |
·通用网络爬虫 | 第14-16页 |
·主题爬虫 | 第16-19页 |
·主题爬虫与通用爬虫的区别 | 第16-17页 |
·主题爬虫的工作原理 | 第17-18页 |
·主题爬虫的结构 | 第18-19页 |
·本章小结 | 第19-20页 |
第3章 主题爬虫系统CarSpider的设计 | 第20-34页 |
·CarSpider总体设计 | 第20-21页 |
·主题描述 | 第21-23页 |
·种子链接的选择 | 第23-24页 |
·网页预处理 | 第24-30页 |
·中文分词 | 第24-26页 |
·HTML文件简介 | 第26页 |
·网页文件解析 | 第26-30页 |
·主题相关度判定 | 第30页 |
·网页消重 | 第30-33页 |
·URL消重 | 第30-32页 |
·内容消重 | 第32-33页 |
·本章小结 | 第33-34页 |
第4章 汽车主题相关度判定 | 第34-51页 |
·主题网页类型分析 | 第34-35页 |
·网页块类型判定 | 第34页 |
·网页类型判定 | 第34-35页 |
·网页主题信息抽取 | 第35-42页 |
·主题相关性算法研究 | 第36-39页 |
·网页量化表示 | 第39-41页 |
·网页主题信息抽取 | 第41-42页 |
·URL与主题相关性预测 | 第42-50页 |
·基于网页内容的URL主题相关度预测 | 第43-46页 |
·基于网络结构的URL主题相关度预测 | 第46-48页 |
·自适应主题爬行策略 | 第48-50页 |
·本章小结 | 第50-51页 |
第5章 主题爬虫系统CarSpider的实现 | 第51-58页 |
·主题爬虫的实现 | 第51-55页 |
·相关类实现 | 第51-53页 |
·实验环境 | 第53页 |
·系统运行 | 第53-55页 |
·实验研究 | 第55-57页 |
·本章小结 | 第57-58页 |
第6章 总结与展望 | 第58-60页 |
·本文总结 | 第58-59页 |
·下一步工作 | 第59-60页 |
致谢 | 第60-61页 |
参考文献 | 第61-64页 |
攻读学位期间发表论文 | 第64页 |