摘要 | 第4-5页 |
ABSTRACT | 第5-6页 |
目录 | 第7-10页 |
第一章 绪论 | 第10-20页 |
1.1 研究背景及意义 | 第10-12页 |
1.2 国内外研究现状 | 第12-16页 |
1.2.1 云计算平台的研究现状 | 第12-14页 |
1.2.2 数据挖掘研究现状 | 第14-15页 |
1.2.3 聚类分析的研究现状 | 第15-16页 |
1.3 前人研究成果综述 | 第16-18页 |
1.4 本文结构 | 第18-20页 |
第二章 相关技术研究分析 | 第20-38页 |
2.1 Hadoop云计算平台 | 第20-30页 |
2.1.1 Hadoop系统架构的组成 | 第20-21页 |
2.1.2 HDFS文件系统 | 第21-27页 |
2.1.3 MapReduce编程模型 | 第27-28页 |
2.1.4 Mapreduce的其他关键技术 | 第28-29页 |
2.1.5 HBase数据库 | 第29-30页 |
2.2 聚类分析 | 第30-37页 |
2.2.1 聚类分析定义 | 第31-32页 |
2.2.2 样本相似距离 | 第32-33页 |
2.2.3 聚类分析方法 | 第33-37页 |
2.3 本章小结 | 第37-38页 |
第三章 数据挖掘系统设计与实现 | 第38-54页 |
3.1 系统简介 | 第38-40页 |
3.1.1 实现目标 | 第38页 |
3.1.2 开发环境 | 第38-39页 |
3.1.3 总体架构 | 第39-40页 |
3.2 服务引擎的实现 | 第40-47页 |
3.2.1 服务引擎接口 | 第40-41页 |
3.2.2 服务引擎实现 | 第41-47页 |
3.3 挖掘引擎的实现 | 第47-50页 |
3.3.1 数据管理服务 | 第47-48页 |
3.3.2 算法服务 | 第48-49页 |
3.3.3 资源管理服务 | 第49-50页 |
3.3.4 日志服务 | 第50页 |
3.4 系统测试 | 第50-52页 |
3.5 本章小结 | 第52-54页 |
第四章 K-Means算法的研究与改进 | 第54-69页 |
4.1 K-Means算法 | 第54-58页 |
4.1.1 K-Means算法的概念 | 第54页 |
4.1.2 算法公式 | 第54-55页 |
4.1.3 K-Means算法流程 | 第55-56页 |
4.1.4 K-Means算法的特点 | 第56-57页 |
4.1.5 K-Means算法存在的问题 | 第57-58页 |
4.2 PAM算法 | 第58-62页 |
4.2.1 K中心点方法 | 第59页 |
4.2.2 PAM算法概述 | 第59-61页 |
4.2.3 PAM算法的研究现状 | 第61页 |
4.2.4 PAM算法与K-Means算法的比较 | 第61-62页 |
4.3 基于PAM改进的K-Means算法 | 第62-67页 |
4.3.1 算法的基本思想 | 第62页 |
4.3.2 算法所用的记号和公式 | 第62-63页 |
4.3.3 算法流程 | 第63-64页 |
4.3.4 改进的K-Means算法实验与分析 | 第64-67页 |
4.4 本章小结 | 第67-69页 |
第五章 改进K-Means算法的并行实现与优化 | 第69-83页 |
5.1 HK-Means算法并行化 | 第69-76页 |
5.1.1 HK-Means并行策略探索 | 第69-71页 |
5.1.2 HK-Means的设计思路 | 第71-73页 |
5.1.3 HK-Means的自定义I/O类 | 第73-74页 |
5.1.4 HK-Means的实现 | 第74-76页 |
5.2 HK-Means算法的优化 | 第76-80页 |
5.2.1 优化MapReduce调度 | 第76-79页 |
5.2.2 优化原始输入数据对象的数量 | 第79-80页 |
5.2.3 优化聚类簇的初始中心点 | 第80页 |
5.3 HK-Means算法分析 | 第80-81页 |
5.4 本章小结 | 第81-83页 |
第六章 HK-Means算法实验与结果分析 | 第83-91页 |
6.1 实验环境与实验数据 | 第83-84页 |
6.1.1 计算机集群机器环境 | 第83-84页 |
6.1.2 实验数据的准备 | 第84页 |
6.2 实验结果与分析 | 第84-89页 |
6.2.1 有效性验证 | 第85-86页 |
6.2.2 优化率验证 | 第86-87页 |
6.2.3 加速比验证 | 第87-88页 |
6.2.4 HK-Means-C算法与k-means算法处理速度比较实验 | 第88-89页 |
6.3 本章小结 | 第89-91页 |
第七章 总结与展望 | 第91-92页 |
参考文献 | 第92-96页 |
致谢 | 第96-98页 |
攻读学位期间发表的学术论文 | 第98页 |