摘要 | 第5-6页 |
Abstract | 第6页 |
第一章 绪论 | 第10-20页 |
1.1 研究背景与意义 | 第10-13页 |
1.2 技术背景与研究进展 | 第13-19页 |
1.3 研究内容与论文结构安排 | 第19-20页 |
第二章 相关技术分析 | 第20-34页 |
2.1 网络舆情数据的存储与管理技术 | 第20-23页 |
2.1.1 NoSQL数据库模型对比分析 | 第20-22页 |
2.1.2 基于HBase的微博关系数据图存储技术 | 第22-23页 |
2.2 Hadoop技术分析 | 第23-31页 |
2.2.1 HDFS原理和特性 | 第24-25页 |
2.2.2 HDFS架构组成 | 第25-28页 |
2.2.3 MapReduce原理和特性 | 第28-29页 |
2.2.4 MapReduce架构组成 | 第29-31页 |
2.3 Hbase技术分析 | 第31-33页 |
2.3.1 Hbase原理和特性 | 第31-32页 |
2.3.2 HBase架构组成 | 第32-33页 |
2.4 本章小结 | 第33-34页 |
第三章 面向微博舆情的Hadoop存储平台需求分析及架构设计与实现 | 第34-52页 |
3.1 网络舆情系统的存储管理的需求分析 | 第34-36页 |
3.2 存储管理平台框架设计与实现 | 第36-38页 |
3.3 平台硬件子系统的设计与实现 | 第38-40页 |
3.4 平台软件子系统的设计与实现 | 第40-50页 |
3.4.1 微博应用的设计与实现 | 第40-42页 |
3.4.2 微博爬虫的设计与实现 | 第42页 |
3.4.3 HDFS路径的设计与实现 | 第42-46页 |
3.4.4 平台数据库的设计与实现 | 第46页 |
3.4.5 Hadoop部署与配置优化 | 第46-50页 |
3.5 本章小结 | 第50-52页 |
第四章 微博舆情数据管理子功能设计与实现 | 第52-68页 |
4.1 微博数据表的逻辑关系设计与实现 | 第52-53页 |
4.2 微博数据存储表的设计与实现 | 第53-59页 |
4.2.1 关键字索引表 | 第53-54页 |
4.2.2 用户属性表 | 第54-56页 |
4.2.3 用户关系表 | 第56-57页 |
4.2.4 微博属性表 | 第57-58页 |
4.2.5 微博关系表 | 第58-59页 |
4.3 微博内容的解析与结构化 | 第59-63页 |
4.3.1 关键字提取 | 第59-60页 |
4.3.2 用户属性提取 | 第60-61页 |
4.3.3 用户关系提取 | 第61-62页 |
4.3.4 微博属性提取 | 第62-63页 |
4.3.5 微博关系提取 | 第63页 |
4.4 微博数据的查询 | 第63-67页 |
4.4.1 注册界面 | 第63-64页 |
4.4.2 用户登录 | 第64-65页 |
4.4.3 存储平台首页 | 第65-66页 |
4.4.4 微博查询功能 | 第66-67页 |
4.5 本章小结 | 第67-68页 |
第五章 微博舆情数据存储管理平台的性能测试与分析 | 第68-76页 |
5.1 硬件子系统的测试和分析 | 第68-70页 |
5.2 软件子系统的测试和分析 | 第70-73页 |
5.3 微博内容查询性能测试与分析 | 第73-75页 |
5.3.1 实验环境及软件配置 | 第73页 |
5.3.2 实验数据 | 第73-75页 |
5.4 本章小结 | 第75-76页 |
第六章 全文结论及展望 | 第76-78页 |
6.1 论文工作总结 | 第76-77页 |
6.2 未来工作展望 | 第77-78页 |
参考文献 | 第78-82页 |
致谢 | 第82-84页 |
个人简历、在学期间发表的论文与研究成果 | 第84页 |