摘要 | 第1-4页 |
Abstract | 第4-11页 |
第1章 绪论 | 第11-14页 |
·研究背景 | 第11页 |
·研究意义与目的 | 第11-12页 |
·论文组织 | 第12-13页 |
·本章小结 | 第13-14页 |
第2章 相关技术综述 | 第14-29页 |
·分布式体系结构综述 | 第14-17页 |
·集中式体系结构 | 第15页 |
·非集中式体系结构 | 第15-16页 |
·混合式的体系结构 | 第16-17页 |
·分布式文件系统技术综述 | 第17-19页 |
·NFS | 第17页 |
·GFS和HDFS | 第17-18页 |
·FastDFS | 第18-19页 |
·消息队列技术综述 | 第19-24页 |
·消息队列技术的演变 | 第19-20页 |
·AMQP协议综述 | 第20-23页 |
·RabbitMQ综述 | 第23-24页 |
·轻量级消息数据交换格式:JSON简介 | 第24-25页 |
·基于Hadoop的分布式图像处理系统的实现及分析 | 第25-28页 |
·HIPI的实现分析 | 第25-26页 |
·HIPI实现上的不足及改进方案 | 第26-28页 |
·本章小结 | 第28-29页 |
第3章 系统总体架构设计 | 第29-39页 |
·问题定义 | 第29-30页 |
·物理架构设计 | 第30-31页 |
·基础服务架构设计 | 第31-35页 |
·系统存储服务设计 | 第32-33页 |
·系统消息队列服务设计 | 第33-35页 |
·应用层设计 | 第35-38页 |
·本章小结 | 第38-39页 |
第4章 基于消息队列的轻量级低耦合的计算框架 | 第39-46页 |
·基于消息队列的计算框架 | 第39-42页 |
·轻量级的任务处理机制 | 第40-41页 |
·低耦合的任务加入和退出机制 | 第41页 |
·工作服务器的在线加入和退出机制 | 第41-42页 |
·计算框架的客户端设计 | 第42-43页 |
·计算框架的服务器端设计 | 第43-45页 |
·后台服务程序设计 | 第44页 |
·工作服务程序设计 | 第44-45页 |
·本章小结 | 第45-46页 |
第5章 基于消息队列的自适应任务分配机制 | 第46-54页 |
·细粒度的批处理任务分解 | 第46-48页 |
·自适应的任务分配方案 | 第48-49页 |
·任务恢复及重分配机制 | 第49-50页 |
·工作服务器任务获取及处理 | 第50-52页 |
·多线程的支持的实现 | 第50-51页 |
·多线程任务处理 | 第51-52页 |
·任务预分配机制及RAMFS缓存 | 第52页 |
·本章小结 | 第52-54页 |
第6章 系统主要消息的设计 | 第54-61页 |
·消息格式 | 第54页 |
·消息分类和及其内容 | 第54-60页 |
·Task启动消息 | 第55-56页 |
·Tasklet相关消息 | 第56-58页 |
·Worker进程相关消息 | 第58-60页 |
·本章小结 | 第60-61页 |
第7章 系统部署和性能评测 | 第61-68页 |
·系统部署环境及配置 | 第61-62页 |
·实验用例 | 第62-64页 |
·性能评测 | 第64-67页 |
·实验一:系统基础通信性能测试 | 第64页 |
·实验二:IO密集型应用测试 | 第64-66页 |
·实验三:计算密集型应用测试 | 第66-67页 |
·本章小结 | 第67-68页 |
第8章 总结和展望 | 第68-70页 |
·总结 | 第68页 |
·展望 | 第68-70页 |
参考文献 | 第70-73页 |
攻读硕士学位期间主要的研究成果 | 第73-74页 |
致谢 | 第74页 |