基于Hadoop的全省重点人口关系数据深挖系统的设计与实现
摘要 | 第4-5页 |
ABSTRACT | 第5页 |
第一章 绪论 | 第9-12页 |
1.1 研究背景及意义 | 第9页 |
1.2 国内外相关研究现状 | 第9-10页 |
1.2.1 国内外相关研究现状 | 第9-10页 |
1.2.2 发展趋势 | 第10页 |
1.3 本文主要研究内容 | 第10-11页 |
1.4 本文结构安排 | 第11-12页 |
第二章 相关技术基础 | 第12-16页 |
2.1 Hadoop | 第12-13页 |
2.1.1 Hadoop简介 | 第12页 |
2.1.2 Hadoop的特点 | 第12-13页 |
2.2 HDFS架构 | 第13页 |
2.2.1 HDFS简介 | 第13页 |
2.2.2 HDFS的特点 | 第13页 |
2.3 分布式数据库HBase | 第13-14页 |
2.3.1 HBase简介 | 第13-14页 |
2.3.2 HBase的特点 | 第14页 |
2.4 WebService技术概述 | 第14-15页 |
2.5 本章小结 | 第15-16页 |
第三章 系统的需求分析 | 第16-22页 |
3.1 系统简介 | 第16-17页 |
3.1.1 系统概述 | 第16页 |
3.1.2 系统可行性分析 | 第16-17页 |
3.2 系统需求描述 | 第17-18页 |
3.2.1 系统总体定位 | 第17页 |
3.2.2 系统功能需求 | 第17页 |
3.2.3 系统性能需求 | 第17-18页 |
3.3 系统UML分析 | 第18-21页 |
3.3.1 数据交换系统UML分析 | 第18-19页 |
3.3.2 数据分析系统UML分析 | 第19-20页 |
3.3.3 业务应用访问系统模块UML分析 | 第20页 |
3.3.4 运维管理系统模块UML分析 | 第20-21页 |
3.4 本章小结 | 第21-22页 |
第四章 系统的设计 | 第22-36页 |
4.1 数据交换系统模块的设计 | 第23-24页 |
4.2 数据分析系统模块的设计 | 第24-25页 |
4.3 业务应用访问系统模块的设计 | 第25-30页 |
4.3.1 综合查询系统的设计 | 第25-27页 |
4.3.2 数据分析系统的设计 | 第27-28页 |
4.3.3 统计分析系统的设计 | 第28-29页 |
4.3.4 决策分析系统的设计 | 第29-30页 |
4.4 运维管理系统模块的设计 | 第30-32页 |
4.4.1 集群管理监控的设计 | 第31页 |
4.4.2 日志管理功能的设计 | 第31-32页 |
4.4.3 运行监控功能的设计 | 第32页 |
4.5 系统数据库表设计 | 第32-35页 |
4.6 本章小结 | 第35-36页 |
第五章 系统的实现 | 第36-56页 |
5.1 数据交换系统模块的实现 | 第36-38页 |
5.1.1 数据交换分类功能的实现 | 第36-37页 |
5.1.2 数据目录管理技术功能的实现 | 第37页 |
5.1.3 数据抽取和装载技术功能的实现 | 第37页 |
5.1.4 数据转换技术功能的实现 | 第37-38页 |
5.2 数据分析系统模块的实现 | 第38-42页 |
5.2.1 数据分析系统的实现过程 | 第38-40页 |
5.2.2 数据分析系统核心实现算法 | 第40-42页 |
5.2.3 数据分析系统的硬件条件 | 第42页 |
5.3 业务应用访问系统模块的实现 | 第42-51页 |
5.3.1 综合查询系统功能的实现 | 第42-46页 |
5.3.2 数据分析系统功能的实现 | 第46-49页 |
5.3.3 统计分析系统功能的实现 | 第49-50页 |
5.3.4 决策分析系统功能的实现 | 第50-51页 |
5.4 运维管理系统模块的实现 | 第51-54页 |
5.4.1 集群管理监控功能的实现 | 第51-53页 |
5.4.2 日志管理功能的实现 | 第53-54页 |
5.4.3 运行监控功能的实现 | 第54页 |
5.5 本章小结 | 第54-56页 |
第六章 系统测试 | 第56-65页 |
6.1 系统测试的目的和意义 | 第56页 |
6.1.1 测试的目的 | 第56页 |
6.1.2 测试的意义 | 第56页 |
6.2 系统测试的方法和步骤 | 第56-64页 |
6.2.1 测试方法 | 第56页 |
6.2.2 功能测试 | 第56-62页 |
6.2.3 性能测试 | 第62-64页 |
6.3 本章小结 | 第64-65页 |
结论 | 第65-66页 |
参考文献 | 第66-69页 |
致谢 | 第69页 |