支持AJAX的分布式爬虫系统的研究与实现
| 摘要 | 第4-5页 |
| Abstract | 第5页 |
| 1 绪论 | 第8-11页 |
| 1.1 背景及意义 | 第8-9页 |
| 1.2 国内外研究现状 | 第9页 |
| 1.3 内容和安排 | 第9-11页 |
| 2 相关技术介绍 | 第11-17页 |
| 2.1 网络爬虫技术 | 第11-13页 |
| 2.2 AJAX 动态加载技术 | 第13-15页 |
| 2.3 NOSQL 技术 | 第15-16页 |
| 2.4 本章小结 | 第16-17页 |
| 3 系统设计方案 | 第17-29页 |
| 3.1 系统需求分析 | 第17-18页 |
| 3.2 系统方案设计 | 第18-28页 |
| 3.3 本章小结 | 第28-29页 |
| 4 系统具体实现 | 第29-41页 |
| 4.1 AJAX 网页爬虫模块的实现 | 第29-33页 |
| 4.2 心跳信息检测模块的实现 | 第33-37页 |
| 4.3 网页属性分类器模块的实现 | 第37-39页 |
| 4.4 消息队列通信模块的实现 | 第39-40页 |
| 4.5 本章小结 | 第40-41页 |
| 5 系统性能分析 | 第41-45页 |
| 5.1 系统测试环境 | 第41-42页 |
| 5.2 测试与性能分析 | 第42-44页 |
| 5.3 本章小结 | 第44-45页 |
| 6 总结与展望 | 第45-47页 |
| 6.1 论文总结 | 第45页 |
| 6.2 前景与展望 | 第45-47页 |
| 致谢 | 第47-48页 |
| 参考文献 | 第48-50页 |
