基于社交网络信息爬虫的设计与实现
摘要 | 第4-5页 |
ABSTRACT | 第5页 |
第一章 绪论 | 第7-14页 |
1.1 研究背景 | 第7-9页 |
1.2 国内外研究现状 | 第9-11页 |
1.3 研究内容 | 第11-12页 |
1.4 本文组织结构 | 第12-14页 |
第二章 相关技术介绍 | 第14-26页 |
2.1 AJAX技术介绍 | 第14-19页 |
2.2 动态网络爬虫介绍 | 第19-22页 |
2.3 NoSQL技术介绍 | 第22-25页 |
2.4 本章小结 | 第25-26页 |
第三章 系统需求分析 | 第26-36页 |
3.1 社交网络信息获取存在的问题 | 第26-27页 |
3.2 社交网络信息获取目标 | 第27-28页 |
3.3 社交信息网络信息获取 | 第28-30页 |
3.4 社交网络信息存储 | 第30-32页 |
3.5 社交网络信息检索 | 第32-35页 |
3.6 本章小结 | 第35-36页 |
第四章 爬虫设计与实现 | 第36-54页 |
4.1 系统总体架构 | 第36-37页 |
4.2 爬虫构造与策略 | 第37-40页 |
4.2.1 爬虫构造分析 | 第37-38页 |
4.2.2 爬行策略分析 | 第38-40页 |
4.3 信息爬取模块的设计与实现 | 第40-50页 |
4.3.1 用户信息爬取 | 第40-43页 |
4.3.2 用户关系信息爬取 | 第43-46页 |
4.3.3 社交网络内容爬取 | 第46-49页 |
4.3.4 社交网络评论爬取 | 第49-50页 |
4.4 信息存储模块的设计与实现 | 第50-51页 |
4.5 信息检索模块的设计与实现 | 第51-53页 |
4.6 本章小结 | 第53-54页 |
第五章 测试与实验 | 第54-62页 |
5.1 实验环境 | 第54-55页 |
5.1.1 硬件环境 | 第54页 |
5.1.2 软件环境 | 第54-55页 |
5.2 实验结果和分析 | 第55-61页 |
5.2.1 爬虫登陆和获取方式 | 第55-56页 |
5.2.2 爬虫数据抓取 | 第56-58页 |
5.2.3 抓取结果分析 | 第58-61页 |
5.3 本章小结 | 第61-62页 |
第六章 总结与展望 | 第62-64页 |
6.1 本文总结 | 第62-63页 |
6.2 未来展望 | 第63-64页 |
参考文献 | 第64-70页 |
致谢 | 第70-71页 |