摘要 | 第3-4页 |
ABSTRACT | 第4页 |
第一章 绪论 | 第8-12页 |
1.1 课题背景 | 第8页 |
1.2 课题研究现状 | 第8-10页 |
1.2.1 学术领域现状 | 第8-9页 |
1.2.2 商业领域现状 | 第9-10页 |
1.3 课题简介 | 第10-11页 |
1.4 本文的组织和工作 | 第11-12页 |
第二章 需求分析 | 第12-18页 |
2.1 综合描述 | 第12-13页 |
2.1.1 系统概况 | 第12页 |
2.1.2 系统运行环境 | 第12页 |
2.1.3 系统需求设计的假设与约束 | 第12-13页 |
2.2 系统功能需求 | 第13-14页 |
2.2.1 系统与新浪微博的结合 | 第13页 |
2.2.2 数据采集功能 | 第13页 |
2.2.3 数据分析挖掘功能 | 第13页 |
2.2.4 数据展示与可视化功能 | 第13-14页 |
2.3 系统性能需求 | 第14-15页 |
2.3.1 系统可用性 | 第14页 |
2.3.2 系统响应时间 | 第14页 |
2.3.3 应用安全性 | 第14-15页 |
2.4 系统用例说明 | 第15-17页 |
2.4.1 用户用例 | 第15-16页 |
2.4.2 系统管理员用例 | 第16-17页 |
2.5 本章小结 | 第17-18页 |
第三章 系统设计 | 第18-32页 |
3.1 系统概要设计 | 第18-19页 |
3.2 系统设计的相关基础理论 | 第19-22页 |
3.2.1 节点中心度分析 | 第19-21页 |
3.2.2 PAGERANK值分析 | 第21-22页 |
3.3 系统前端采集模块详细设计 | 第22-25页 |
3.3.1 新浪微博API的数据限制 | 第22页 |
3.3.2 多种采集模式设计 | 第22-23页 |
3.3.3 采集器工厂模式 | 第23-24页 |
3.3.4 分布式爬虫采集器 | 第24-25页 |
3.4 系统数据存储模块详细设计 | 第25-28页 |
3.4.1 系统ER图详细设计 | 第25-26页 |
3.4.2 系统数据实体分析 | 第26页 |
3.4.3 系统数据库详细设计 | 第26-28页 |
3.5 系统数据挖掘业务模块详细设计 | 第28-30页 |
3.5.1 系统数据挖掘业务模块设计概要 | 第28-29页 |
3.5.2 GEXF文件格式介绍 | 第29-30页 |
3.6 系统可视化数据展示模块详细设计 | 第30-31页 |
3.6.1 系统可视化数据展示模块的数据交互接口 | 第30-31页 |
3.6.2 系统数据分析结果的展现形式 | 第31页 |
3.7 本章小结 | 第31-32页 |
第四章 系统实现 | 第32-55页 |
4.1 系统前端采集模块实现 | 第32-39页 |
4.1.1 新浪微博开放平台 | 第32页 |
4.1.2 平台接入与OAUTH认证协议 | 第32-33页 |
4.1.3 官方 API 采集器数据获取 | 第33-36页 |
4.1.4 分布式爬虫采集器数据获取 | 第36-38页 |
4.1.5 系统支持EMOJI表情编码的配置 | 第38-39页 |
4.2 数据存储模块实现 | 第39-40页 |
4.2.1 HIBERNATE配置示例 | 第39-40页 |
4.2.2 配置数据关联进行进一步封装 | 第40页 |
4.3 数据分析挖掘模块实现 | 第40-47页 |
4.3.1 微博转发流转轨迹 | 第40-42页 |
4.3.2 利用GEPHI框架将图数据转化为GEXF文件 | 第42-43页 |
4.3.3 利用GEPHI框架对图文件进行分析 | 第43-44页 |
4.3.4 分析节点出度 | 第44页 |
4.3.5 统计转发量变化曲线 | 第44-45页 |
4.3.6 分析任意节点到根节点的距离 | 第45页 |
4.3.7 对微博转发用户属性进行统计 | 第45-46页 |
4.3.8 节点中心度和节点PAGERANK数值的计算 | 第46页 |
4.3.9 进一步对可视化模块的支持 | 第46-47页 |
4.4 可视化数据展示模块实现 | 第47-54页 |
4.4.1 前端展示实现技术 | 第47-48页 |
4.4.2 SIGMA.JS框架 | 第48页 |
4.4.3 ECHARTS图表框架 | 第48-49页 |
4.4.4 系统交互与可视化示例 | 第49-54页 |
4.5 本章小结 | 第54-55页 |
第五章 实验与分析 | 第55-60页 |
5.1 系统部署 | 第55页 |
5.2 系统性能测试 | 第55-57页 |
5.2.1 系统响应时间测试 | 第55-56页 |
5.2.2 系统负载能力测试 | 第56-57页 |
5.3 系统功能测试 | 第57-59页 |
5.3.1 系统数据采集分析准确性测试 | 第57-58页 |
5.3.2 系统异常数据处理测试 | 第58-59页 |
5.4 本章小结 | 第59-60页 |
第六章 结论与展望 | 第60-61页 |
6.1 主要工作和创新点 | 第60页 |
6.2 后续研究工作 | 第60-61页 |
参考文献 | 第61-64页 |
致谢 | 第64-65页 |
攻读硕士学位期间已发表或录用的论文 | 第65-67页 |