摘要 | 第5-6页 |
ABSTRACT | 第6-7页 |
第1章 绪论 | 第11-15页 |
1.1 课题的研究背景 | 第11-12页 |
1.1.1 大数据及其处理技术的发展 | 第11页 |
1.1.2 大规模图处理技术的研究背景 | 第11-12页 |
1.2 课题的研究意义 | 第12-13页 |
1.3 本文的研究内容与组织结构 | 第13-15页 |
第2章 大规模图迭代处理相关技术及相关工作 | 第15-27页 |
2.1 图划分相关工作 | 第15-17页 |
2.1.1 图划分问题描述 | 第15-16页 |
2.1.2 大图处理系统图划分技术说明 | 第16-17页 |
2.2 大规模图处理的计算模型介绍 | 第17-21页 |
2.2.1 MapReduce计算模型 | 第17-20页 |
2.2.2 BSP计算模型 | 第20-21页 |
2.3 大规模图迭代计算的处理机制 | 第21-23页 |
2.3.1 以顶点为中心的同步处理机制 | 第21-22页 |
2.3.2 以图为中心的异步处理机制 | 第22-23页 |
2.4 典型BSP模型大规模图处理系统介绍 | 第23-26页 |
2.4.1 Pregel系统 | 第23-24页 |
2.4.2 Hama系统 | 第24-25页 |
2.4.3 Giraph系统 | 第25页 |
2.4.4 Giraph++系统 | 第25-26页 |
2.5 本章小结 | 第26-27页 |
第3章 同异步自适应大图迭代计算框架总体设计 | 第27-37页 |
3.1 大规模图迭代计算性能影响因素分析 | 第27-29页 |
3.2 BC-BSP系统介绍 | 第29-32页 |
3.2.1 BC-BSP系统体系结构介绍 | 第29-30页 |
3.2.2 用户编程接口介绍 | 第30页 |
3.2.3 作业提交与执行流程 | 第30-32页 |
3.3 同异步自适应大图迭代计算框架总体结构介绍 | 第32-34页 |
3.4 同异步自适应大图迭代计算框架总体处理流程介绍 | 第34-36页 |
3.5 本章小结 | 第36-37页 |
第4章 基于顶点归属的输入图评价模块 | 第37-47页 |
4.1 顶点归属度分析 | 第37-39页 |
4.1.1 顶点的入度归属度 | 第37-38页 |
4.1.2 顶点的本地归属度 | 第38-39页 |
4.1.3 顶点的最终归属度 | 第39页 |
4.2 分区不稳定顶点发现 | 第39-42页 |
4.2.1 顶点激活编码 | 第39-41页 |
4.2.2 不稳定顶点列表的选取 | 第41-42页 |
4.3 输入图评价机制的实现 | 第42-46页 |
4.3.1 输入图评价标准 | 第42-43页 |
4.3.2 输入图评价的总体流程 | 第43-46页 |
4.4 本章小结 | 第46-47页 |
第5章 基于子图聚簇的在线顶点迁移模块 | 第47-57页 |
5.1 子图聚簇思想概述 | 第47-48页 |
5.2 迁移顶点的选取策略 | 第48-52页 |
5.2.1 顶点迁移规模及选取参数确定 | 第48-49页 |
5.2.2 迁移顶点选取流程分析 | 第49-52页 |
5.3 在线顶点迁移的实现 | 第52-55页 |
5.3.1 顶点迁移整体流程说明 | 第52页 |
5.3.2 顶点数据和消息数据的迁移流程 | 第52-53页 |
5.3.3 全局路由表的更新 | 第53-55页 |
5.4 本章小结 | 第55-57页 |
第6章 同异步自适应大图迭代计算框架系统集成及测试 | 第57-69页 |
6.1 同异步计算框架的系统集成 | 第57-58页 |
6.2 同异步自适应计算切换机制的系统集成 | 第58-59页 |
6.3 实验环境与数据 | 第59-61页 |
6.3.1 实验软硬件环境 | 第59-60页 |
6.3.2 实验数据 | 第60-61页 |
6.4 输入图评价与顶点迁移代价测试评估 | 第61-62页 |
6.5 系统性能对比测试 | 第62-64页 |
6.5.1 系统计算性能对比测试 | 第62-64页 |
6.5.2 系统通信效率对比测试 | 第64页 |
6.6 系统可扩展性实验 | 第64-65页 |
6.7 顶点迁移通信优化测试 | 第65-66页 |
6.7.1 以图为中心计算的局限性 | 第65-66页 |
6.7.2 顶点迁移的通信优化效果 | 第66页 |
6.8 本章小结 | 第66-69页 |
第7章 总结与展望 | 第69-71页 |
7.1 本文工作总结 | 第69页 |
7.2 进一步研究的工作 | 第69-71页 |
参考文献 | 第71-75页 |
致谢 | 第75-77页 |
硕士期间发表的论文及参加的项目 | 第77页 |