影视大数据分析系统中数据存储的关键问题研究与实现
摘要 | 第4-5页 |
ABSTRACT | 第5-6页 |
第一章 绪论 | 第10-14页 |
1.1 研究背景 | 第10-11页 |
1.2 研究内容 | 第11页 |
1.3 论文结构安排 | 第11-12页 |
1.4 本章小结 | 第12-14页 |
第二章 课题相关研究 | 第14-22页 |
2.1 大数据背景 | 第14-15页 |
2.1.1 数据来源 | 第14页 |
2.1.2 数据分类 | 第14-15页 |
2.2 分布式存储分类 | 第15-17页 |
2.2.1 分布式文件系统 | 第15-16页 |
2.2.2 分布式键值系统 | 第16页 |
2.2.3 分布式表格系统 | 第16页 |
2.2.4 分布式数据库系统 | 第16-17页 |
2.3 NoSQL系统 | 第17-20页 |
2.3.1 NoSQL特点 | 第17-18页 |
2.3.2 NoSQL分类 | 第18-20页 |
2.4 本章小结 | 第20-22页 |
第三章 系统需求分析 | 第22-28页 |
3.1 系统概述 | 第22-24页 |
3.1.1 系统背景 | 第22-23页 |
3.1.2 总体目标 | 第23-24页 |
3.2 数据分析 | 第24-26页 |
3.2.1 系统功能模块 | 第24-25页 |
3.2.2 数据统计 | 第25-26页 |
3.3 非功能性需求 | 第26-27页 |
3.3.1 安全性 | 第26页 |
3.3.2 可靠性 | 第26页 |
3.3.3 可扩展性 | 第26-27页 |
3.3.4 高效性 | 第27页 |
3.3.5 可维护性 | 第27页 |
3.4 本章小结 | 第27-28页 |
第四章 基于MYSQL的架构设计与实现 | 第28-50页 |
4.1 数据库架构分类 | 第28-29页 |
4.2 数据切片 | 第29-31页 |
4.2.1 数据切分技术 | 第29页 |
4.2.2 分区表技术 | 第29-30页 |
4.2.3 切分规则 | 第30-31页 |
4.3 SHARDING设计 | 第31-37页 |
4.3.1 整体策略 | 第31-32页 |
4.3.2 分库设计 | 第32页 |
4.3.3 水平分表设计 | 第32-34页 |
4.3.4 分区设计 | 第34-35页 |
4.3.5 反向合并 | 第35-37页 |
4.4 MYSQL复制 | 第37-41页 |
4.4.1 集群与数据一致性 | 第37-38页 |
4.4.2 主从复制技术 | 第38-40页 |
4.4.3 复制级别 | 第40-41页 |
4.5 高可用集群方案设计 | 第41-47页 |
4.5.1 集群架构 | 第42-45页 |
4.5.2 集群设计 | 第45-47页 |
4.6 方案整合 | 第47-48页 |
4.7 本章小结 | 第48-50页 |
第五章 系统访问实现与性能分析 | 第50-68页 |
5.1 分布式数据访问 | 第50-53页 |
5.1.1 实现层面 | 第50-52页 |
5.1.2 问题与解决思路 | 第52-53页 |
5.2 SHARDING访问实现 | 第53-57页 |
5.2.1 动态数据源切换实现 | 第53-55页 |
5.2.2 DAO层路由实现 | 第55-57页 |
5.3 集群访问实现 | 第57-62页 |
5.3.1 Amoeba项目 | 第57-60页 |
5.3.2 配置与实现 | 第60页 |
5.3.3 读写分离与负载均衡 | 第60-62页 |
5.4 性能分析 | 第62-66页 |
5.4.1 性能瓶颈 | 第62-63页 |
5.4.2 数据比较 | 第63-64页 |
5.4.3 性能比较 | 第64-66页 |
5.5 本章小结 | 第66-68页 |
第六章 总结及展望 | 第68-70页 |
6.1 论文工作总结 | 第68-69页 |
6.2 展望 | 第69-70页 |
参考文献 | 第70-72页 |
致谢 | 第72-74页 |
攻读学位期间发表的学术论文 | 第74页 |