恶意URL检测项目中基于PageRank算法的网络爬虫的设计和实现
| 摘要 | 第1-5页 |
| Abstract | 第5-9页 |
| 第一章 绪论 | 第9-12页 |
| ·研究背景 | 第9-10页 |
| ·课题的产生及研究意义 | 第10页 |
| ·课题的产生 | 第10页 |
| ·课题的研究意义 | 第10页 |
| ·论文内容安排 | 第10-12页 |
| 第二章 恶意URL检测项目的介绍 | 第12-20页 |
| ·系统的研究目的及相关概念 | 第12-14页 |
| ·研究目的 | 第12页 |
| ·Internet网络安全 | 第12-13页 |
| ·恶意URL相关概念 | 第13-14页 |
| ·系统总体设计 | 第14-17页 |
| ·需求分析 | 第14-15页 |
| ·系统设计目标 | 第15页 |
| ·系统功能模块 | 第15-17页 |
| ·系统运行情况 | 第17-20页 |
| ·系统原型机图 | 第17-19页 |
| ·系统实验结果总结 | 第19-20页 |
| 第三章 网路爬虫及相关技术 | 第20-31页 |
| ·通用网络爬虫与主题网络爬虫 | 第20-23页 |
| ·通用网络爬虫 | 第20-21页 |
| ·主题网络爬虫 | 第21-22页 |
| ·两种类型爬虫的比较 | 第22-23页 |
| ·网络爬虫研究现状 | 第23-25页 |
| ·Web页面的特点 | 第23页 |
| ·网络爬虫的研究历史 | 第23-24页 |
| ·具有代表性的网络爬虫研究 | 第24-25页 |
| ·网络爬虫相关技术 | 第25-31页 |
| ·Java技术 | 第25-26页 |
| ·网络爬虫的搜索策略 | 第26-27页 |
| ·平衡礼貌策略 | 第27-28页 |
| ·PageRank算法和HITS算法的研究 | 第28-29页 |
| ·网页解析技术 | 第29-31页 |
| 第四章 网路爬虫的总体设计 | 第31-40页 |
| ·系统需求分析 | 第31-32页 |
| ·系统工作流程图 | 第32-36页 |
| ·系统结构 | 第36-38页 |
| ·系统体系结构 | 第36-37页 |
| ·系统设计结构分析 | 第37-38页 |
| ·系统主要功能模块类设计 | 第38-39页 |
| ·系统开发环境 | 第39-40页 |
| 第五章 网路爬虫的详细设计和实现 | 第40-63页 |
| ·中心控制模块的设计和实现 | 第40-43页 |
| ·线程控制模块 | 第40-41页 |
| ·线程池模块 | 第41-43页 |
| ·日志记录模块 | 第43页 |
| ·任务执行模块的设计和实现 | 第43-58页 |
| ·爬虫主模块的设计和实现 | 第43-48页 |
| ·网页下载模块的设计和实现 | 第48-50页 |
| ·网页解析模块的设计和实现 | 第50-54页 |
| ·Url管理模块 | 第54-58页 |
| ·数据库的设计 | 第58-60页 |
| ·数据库表的设计 | 第58-59页 |
| ·数据库管理模块 | 第59-60页 |
| ·系统测试 | 第60-63页 |
| 第六章 总结与展望 | 第63-64页 |
| ·论文工作总结 | 第63页 |
| ·未来展望 | 第63-64页 |
| 参考文献 | 第64-67页 |
| 致谢 | 第67-68页 |
| 攻读学位期间发表的学术论文目录 | 第68页 |
