云计算环境下图计算关键处理技术研究与实现
摘要 | 第4-5页 |
ABSTRACT | 第5-6页 |
第一章 概述 | 第10-14页 |
1.1 课题研究背景 | 第10-11页 |
1.2 课题的研究内容和意义 | 第11-13页 |
1.3 论文结构安排 | 第13-14页 |
第二章 图存储与计算引擎技术 | 第14-33页 |
2.1 图存储面临的技术挑战 | 第14-15页 |
2.2 图数据模型与存储方式 | 第15-16页 |
2.2.1 图数据模型 | 第15页 |
2.2.2 图存储数据结构 | 第15-16页 |
2.2.3 图存储系统 | 第16页 |
2.3 HDFS图存储 | 第16-19页 |
2.3.1 HDFS架构 | 第16-18页 |
2.3.2 HDFS中的数据复制 | 第18-19页 |
2.3.3 基于HDFS的图存储 | 第19页 |
2.4 MapReduce与BSP | 第19-24页 |
2.4.1 MapReduce | 第19-22页 |
2.4.2 BSP | 第22页 |
2.4.3 BSP与MapReduce对比 | 第22-24页 |
2.5 Hadoop架构 | 第24-25页 |
2.6 Hama | 第25-30页 |
2.6.1 Hama架构 | 第26-27页 |
2.6.2 Hama包结构 | 第27-28页 |
2.6.3 Hama编程方式 | 第28-30页 |
2.7 YARN | 第30-32页 |
2.7.1 YARN简介 | 第30-31页 |
2.7.2 Hama on YARN | 第31-32页 |
2.8 小结 | 第32-33页 |
第三章 图分割算法研究与实现 | 第33-57页 |
3.1 图划分的关键因素 | 第33-34页 |
3.1.1 通信代价 | 第33页 |
3.1.2 负载均衡 | 第33-34页 |
3.1.3 存储冗余 | 第34页 |
3.2 图分割算法评价指标 | 第34-35页 |
3.2.1 子图关联 | 第34页 |
3.2.2 子图均衡 | 第34页 |
3.2.3 数据冗余 | 第34-35页 |
3.3 图分割算法进展 | 第35-36页 |
3.4 并行MSP算法 | 第36-43页 |
3.4.1 算法主要思想 | 第36-39页 |
3.4.2 算法并行化原理 | 第39-40页 |
3.4.3 算法并行化实现 | 第40-43页 |
3.5 并行Metis算法 | 第43-52页 |
3.5.1 算法主要思想 | 第43-44页 |
3.5.2 算法并行化原理 | 第44-47页 |
3.5.3 算法并行化实现 | 第47-52页 |
3.6 并行图分割算法性能测试 | 第52-54页 |
3.6.1 硬件平台 | 第52页 |
3.6.2 软件平台 | 第52页 |
3.6.3 测试数据集 | 第52-53页 |
3.6.4 测试结果 | 第53-54页 |
3.7 并行图分割算法效果测试 | 第54-56页 |
3.7.1 测试指标 | 第54-55页 |
3.7.2 数据集 | 第55页 |
3.7.3 测试结果 | 第55-56页 |
3.8 并行MSP算法与并行Metis算法比较 | 第56页 |
3.9 小结 | 第56-57页 |
第四章 图挖掘算法的并行化实现 | 第57-66页 |
4.1 PageRank算法的并行化实现 | 第57-59页 |
4.1.1 算法主要思想 | 第57页 |
4.1.2 算法并行化原理 | 第57-58页 |
4.1.3 算法实现 | 第58-59页 |
4.2 单源最短路径算法的并行化实现 | 第59-60页 |
4.2.1 算法主要思想 | 第59页 |
4.2.2 算法并行化原理 | 第59页 |
4.2.3 算法实现 | 第59-60页 |
4.3 K-means算法的并行化实现 | 第60-61页 |
4.3.1 算法主要思想 | 第60页 |
4.3.2 算法并行化原理 | 第60页 |
4.3.3 算法实现 | 第60-61页 |
4.4 LPA算法的并行化实现 | 第61-62页 |
4.4.1 算法主要思想 | 第61页 |
4.4.2 算法并行化原理 | 第61-62页 |
4.4.3 算法实现 | 第62页 |
4.5 性能测试 | 第62-65页 |
4.5.1 硬件平台 | 第62页 |
4.5.2 软件平台 | 第62页 |
4.5.3 测试数据集 | 第62-63页 |
4.5.4 测试结果及分析 | 第63-65页 |
4.6 小结 | 第65-66页 |
第五章 社会网络分析系统设计与实现 | 第66-78页 |
5.1 架构设计 | 第66-67页 |
5.2 功能介绍 | 第67-73页 |
5.2.1 网络提取 | 第67-68页 |
5.2.2 网络分析 | 第68-70页 |
5.2.3 查询与展示 | 第70-73页 |
5.3 并行算法组件实现方式 | 第73-77页 |
5.3.1 界面设计与实现 | 第73-75页 |
5.3.2 后台算法实现 | 第75-77页 |
5.4 小结 | 第77-78页 |
第六章 总结与展望 | 第78-79页 |
参考文献 | 第79-81页 |
致谢 | 第81-82页 |
攻读学位期间发表的学术论文目录 | 第82页 |