并行计算支撑系统DCR的研究和实现
摘要 | 第5-6页 |
ABSTRACT | 第6-7页 |
第一章 绪论 | 第11-20页 |
1.1 研究目的和意义 | 第11-12页 |
1.2 研究现状 | 第12-19页 |
1.2.1 MapReduce编程模型 | 第12-13页 |
1.2.2 Hadoop系统 | 第13-15页 |
1.2.3 Spark系统 | 第15-16页 |
1.2.4 Storm系统 | 第16-17页 |
1.2.5 MPI并行编程模型 | 第17-18页 |
1.2.6 研究现状小结 | 第18-19页 |
1.3 论文研究内容和组织结构 | 第19-20页 |
第二章 系统总体结构和特点 | 第20-27页 |
2.1 系统的总体结构 | 第20-23页 |
2.1.1 应用程序模型 | 第21-22页 |
2.1.2 运行框架 | 第22-23页 |
2.2 系统的主要特点 | 第23-25页 |
2.2.1 可扩展性 | 第23-24页 |
2.2.2 易用性 | 第24页 |
2.2.3 容错性 | 第24页 |
2.2.4 性能效率 | 第24-25页 |
2.3 与其他并行系统的比较 | 第25-26页 |
2.4 本章小结 | 第26-27页 |
第三章 DCR系统的使用方法 | 第27-36页 |
3.1 应用程序的计算模型 | 第27-28页 |
3.2 应用程序的编程方法 | 第28-31页 |
3.2.1 数据描述 | 第28-29页 |
3.2.2 任务分解 | 第29-30页 |
3.2.3 计算和规约 | 第30-31页 |
3.2.4 应用程序的注册 | 第31页 |
3.3 应用程序的验证方法 | 第31-32页 |
3.4 应用程序的运行方法 | 第32-35页 |
3.4.1 输入输出文件 | 第32-33页 |
3.4.2 系统启动参数 | 第33-34页 |
3.4.3 系统输出信息 | 第34-35页 |
3.5 本章小节 | 第35-36页 |
第四章 运行时刻框架的设计与实现 | 第36-66页 |
4.1 调度节点总体结构 | 第36-43页 |
4.1.1 线程结构 | 第36-37页 |
4.1.2 运行流程 | 第37-43页 |
4.2 计算节点总体结构 | 第43-47页 |
4.2.1 线程结构 | 第43-44页 |
4.2.2 运行流程 | 第44-46页 |
4.2.3 任务队列和原始任务缓存 | 第46-47页 |
4.3 调度节点和计算节点之间的网络通信 | 第47-50页 |
4.3.1 节点管理 | 第48-49页 |
4.3.2 任务管理 | 第49-50页 |
4.4 关键模块的设计与实现 | 第50-60页 |
4.4.1 虚拟队列机制 | 第50-56页 |
4.4.2 计算节点的管理 | 第56-59页 |
4.4.3 用户程序的封装与调用 | 第59-60页 |
4.5 可扩展的任务分派机制 | 第60-63页 |
4.5.1 可扩展任务分派机制方法的设计与实现 | 第60-61页 |
4.5.2 顺序加载和随机分发策略 | 第61页 |
4.5.3 基于类型的任务分发策略 | 第61-63页 |
4.6 可靠性设计 | 第63-65页 |
4.6.1 计算节点失效的处理机制 | 第63-64页 |
4.6.2 调度节点出错的处理机制 | 第64页 |
4.6.3 网络丢包处理机制 | 第64-65页 |
4.7 本章小结 | 第65-66页 |
第五章 并行计算框架测试与分析 | 第66-78页 |
5.1 测试环境 | 第66页 |
5.2 积分计算测试案例 | 第66-70页 |
5.2.1 计算逻辑描述 | 第67-69页 |
5.2.2 加速效果测试 | 第69-70页 |
5.3 BLAST计算测试案例 | 第70-75页 |
5.3.1 计算逻辑描述 | 第71-73页 |
5.3.2 加速效果测试 | 第73-75页 |
5.4 不同任务分发策略效果测试 | 第75-76页 |
5.5 可靠性测试 | 第76-77页 |
5.6 测试结果小结 | 第77页 |
5.7 本章小结 | 第77-78页 |
总结与展望 | 第78-80页 |
参考文献 | 第80-83页 |
攻读硕士学位期间取得的研究成果 | 第83-84页 |
致谢 | 第84-85页 |
附件 | 第85页 |