微博数据采集系统的设计与实现
| 摘要 | 第1-5页 |
| Abstract | 第5-8页 |
| 第1章 绪论 | 第8-12页 |
| ·研究背景和意义 | 第8-9页 |
| ·国内外研究现状及发展趋势 | 第9-10页 |
| ·本文主要工作 | 第10页 |
| ·本文章节安排 | 第10-12页 |
| 第2章 相关工作综述 | 第12-22页 |
| ·微博信息采集 | 第12-18页 |
| ·网络爬虫 | 第12-18页 |
| ·微博 API | 第18页 |
| ·微博信息分析 | 第18-19页 |
| ·微博信息挖掘 | 第19-20页 |
| ·本章小结 | 第20-22页 |
| 第3章 基于模拟登录的海量微博信息获取 | 第22-34页 |
| ·模拟登录的设计与实现 | 第23-27页 |
| ·模拟登录抓包分析 | 第23-25页 |
| ·模拟登录程序化 | 第25-27页 |
| ·数据完整性机制 | 第27-28页 |
| ·博主首页微言内容的抓取 | 第27页 |
| ·博主非首言内容的抓取 | 第27-28页 |
| ·微博数据的解析 | 第28-29页 |
| ·明文格式解析 | 第28-29页 |
| ·json 数据解析 | 第29页 |
| ·数据的持久化 | 第29页 |
| ·数据测试 | 第29-32页 |
| ·本章小结 | 第32-34页 |
| 第4章 基于微博 API 的微博信息获取 | 第34-42页 |
| ·调用 API 设计思路 | 第34-38页 |
| ·开放平台开发流程 | 第34页 |
| ·OAuth2.0 授权 | 第34-37页 |
| ·SDK 开发包 | 第37页 |
| ·接口资源 | 第37-38页 |
| ·微博数据的获取 | 第38-40页 |
| ·微博数据的解析 | 第40页 |
| ·本章小结 | 第40-42页 |
| 第5章 实验结果与分析 | 第42-48页 |
| ·处理速度 | 第42-44页 |
| ·基于模拟登录的海量微博信息获取处理速度 | 第42页 |
| ·基于微博 API 的微博信息获取处理速度 | 第42-44页 |
| ·对比结论 | 第44页 |
| ·方便程度 | 第44-45页 |
| ·准确率 | 第45-46页 |
| ·下载数据的全面性 | 第46-47页 |
| ·存在的问题 | 第47页 |
| ·下一步研究计划 | 第47页 |
| ·本章小结 | 第47-48页 |
| 结论 | 第48-50页 |
| 参考文献 | 第50-55页 |
| 致谢 | 第55-56页 |
| 个人简历 | 第56页 |