摘要 | 第1-4页 |
ABSTRACT | 第4-8页 |
第1章 绪论 | 第8-11页 |
·课题的研究背景和意义 | 第8-10页 |
·课题背景 | 第8-9页 |
·课题意义 | 第9-10页 |
·本文研究内容及组织结构 | 第10-11页 |
第2章 聚焦网络爬虫初步研究及RSS技术介绍 | 第11-28页 |
·相关知识介绍 | 第11-14页 |
·URL结构分析 | 第11页 |
·HTML页面分析 | 第11-14页 |
·网络爬虫概述 | 第14页 |
·通用网络爬虫研究 | 第14-18页 |
·通用网络爬虫简介 | 第14-16页 |
·开源网络爬虫实例 | 第16-17页 |
·通用网络爬虫不足 | 第17-18页 |
·聚焦网络爬虫研究 | 第18-20页 |
·RSS技术研究 | 第20-27页 |
·RSS概念和工作原理 | 第21-23页 |
·RSS的发展历史 | 第23-24页 |
·RSS feed文件格式 | 第24-27页 |
·RSS客户端简介 | 第27页 |
·本章小结 | 第27-28页 |
第3章 基于RSS的聚焦网络爬虫的关键技术研究 | 第28-42页 |
·抓取网页信息技术研究 | 第29-30页 |
·主题网络爬虫爬行策略 | 第30-33页 |
·文本分类算法研究 | 第33-37页 |
·TF-IDF算法 | 第33-34页 |
·TF-IDF算法的改进 | 第34-37页 |
·网络爬虫增量式抓取的研究及改进 | 第37-41页 |
·本章小结 | 第41-42页 |
第4章 基于RSS的聚焦网络爬虫在高校网站群中的系统的设计与实现 | 第42-62页 |
·系统需求分析 | 第42-43页 |
·系统总体设计 | 第43-45页 |
·系统模块设计及实现 | 第45-61页 |
·聚焦网络爬虫子系统设计及实现 | 第45-60页 |
·RSS推送子系统设计及实现 | 第60-61页 |
·本章小结 | 第61-62页 |
第5章 系统测试与结果分析 | 第62-69页 |
·系统环境 | 第62页 |
·系统实验结果及分析 | 第62-68页 |
·系统爬虫运行 | 第62-64页 |
·系统爬虫性能分析 | 第64-66页 |
·网页分类准确度分析 | 第66-67页 |
·对发布的RSS文档的订阅测试 | 第67-68页 |
·本章小结 | 第68-69页 |
第6章 总结与展望 | 第69-71页 |
·工作总结 | 第69页 |
·工作展望 | 第69-71页 |
致谢 | 第71-72页 |
参考文献 | 第72-75页 |
攻读学位期间的研究成果 | 第75页 |