| 摘要 | 第4-5页 |
| Abstract | 第5页 |
| 1 绪论 | 第7-12页 |
| 1.1 课题背景 | 第7页 |
| 1.2 爬虫研究现状 | 第7-10页 |
| 1.3 研究内容与论文组织 | 第10-12页 |
| 2 爬虫相关技术 | 第12-21页 |
| 2.1 爬虫技术研究 | 第12页 |
| 2.2 爬虫架构研究 | 第12-15页 |
| 2.3 爬虫关键技术 | 第15-20页 |
| 2.4 本章小结 | 第20-21页 |
| 3 爬虫系统的需求分析与设计 | 第21-33页 |
| 3.1 需求分析 | 第21-24页 |
| 3.2 总体架构设计 | 第24-25页 |
| 3.3 分模块设计 | 第25-29页 |
| 3.4 数据存储设计 | 第29-32页 |
| 3.5 本章小结 | 第32-33页 |
| 4 爬虫系统的实现 | 第33-48页 |
| 4.1 分模块实现 | 第33-42页 |
| 4.2 系统运行测试 | 第42-47页 |
| 4.3 本章小结 | 第47-48页 |
| 5 总结与展望 | 第48-50页 |
| 5.1 论文总结 | 第48页 |
| 5.2 研究展望 | 第48-50页 |
| 致谢 | 第50-52页 |
| 参考文献 | 第52-54页 |