首页--工业技术论文--自动化技术、计算机技术论文--计算技术、计算机技术论文--计算机软件论文--程序设计、软件工程论文--程序设计论文

大数据流的实时处理研究

摘要第1-5页
Abstract第5-7页
目录第7-10页
第一章 绪论第10-16页
   ·课题研究的背景及意义第10页
   ·研究现状及存在的问题第10-12页
     ·集中式环境下的研究现状及问题第10-11页
     ·分布式环境下的研究现状及问题第11-12页
   ·污水实时监控和处理的研究现状第12-13页
     ·污水实时监控和处理系统发展现状第12页
     ·传统的污水实时监控和处理系统的局限性第12-13页
   ·本文研究内容与结构安排第13-16页
     ·主要研究工作第13-14页
     ·结构安排第14-16页
第二章 数据流实时处理理论与研究技术第16-32页
   ·概述第16页
   ·基础理论知识介绍第16-18页
     ·数据流基础知识第16-17页
     ·实时处理基础知识第17-18页
   ·集中式环境下数据流实时处理技术介绍与分析第18-22页
     ·基于滑动窗口机制的数据流模型技术第18-19页
     ·网络数据流实时处理下的内存管理策略第19-22页
   ·分布式环境下数据流实时处理技术介绍与分析第22-27页
     ·基于数据流的公平调度策略第22-24页
     ·实时 MapReduce 技术第24-25页
     ·Storm 数据流处理系统第25-27页
   ·污水实时监控与处理技术研究第27-31页
     ·污水处理背景知识第27-28页
     ·云平台下的污水处理行业标准第28-31页
   ·本章小结第31-32页
第三章 MapReduce 下周期性工作流的实时调度优化策略第32-40页
   ·概述第32页
   ·MapReduce工作流程第32页
   ·MapReduce下周期性工作流模型第32-33页
   ·优化策略所做工作第33-35页
     ·Job 分配和 Task 分配第33-34页
     ·转换方式实现作业抢占第34页
     ·执行时间预估值第34-35页
   ·优化调度策略的算法实现与实施第35-36页
     ·实时调度优化算法伪代码第35-36页
     ·优化调度策略的实施过程第36页
   ·实验结果与分析第36-38页
     ·响应时间对比分析实验第36-38页
     ·调度成功率对比第38页
   ·本章小结第38-40页
第四章 基于集群拓扑结构的工作流实时调度策略第40-47页
   ·概述第40页
   ·Hadoop默认的调度策略第40-41页
   ·改进的基于集群拓扑结构的工作流实时调度策略第41-43页
     ·Hadoop 集群的拓扑结构第41-42页
     ·预估完成时间隶属函数(MT)第42页
     ·集群拓扑距离函数(TD)第42-43页
   ·算法的实现第43-44页
     ·Job 优先级策略第43页
     ·算法描述第43-44页
   ·实验及结果分析第44-46页
   ·本章小结第46-47页
第五章 污水实时监控和处理系统设计与实现第47-63页
   ·概述第47-48页
     ·集中式环境下数据流实时处理系统面临的问题第47页
     ·优化方法第47-48页
   ·系统功能需求分析第48页
   ·系统整体设计第48-50页
     ·系统拓扑结构第48-49页
     ·功能模块设计第49-50页
   ·系统功能模块实现第50-55页
     ·数据通信模块第50-51页
     ·协议解析和验证模块第51-52页
     ·数据分析和处理模块第52-53页
     ·设备控制模块第53-54页
     ·历史数据存储和查询第54页
     ·系统主界面展示第54-55页
   ·污水实时监控和处理云平台系统实现第55-61页
     ·云平台 MVC 基础框架及实现第55-59页
     ·云平台调度策略算法实现第59页
     ·任务计划与 Map-Reduce第59-60页
     ·云平台界面展示第60-61页
   ·污水实时监控和处理系统实验性能分析第61-62页
     ·系统数据处理量和耗时分析第61页
     ·系统数据处理实时性分析第61-62页
   ·本章小结第62-63页
主要结论与展望第63-65页
 主要结论第63页
 展望第63-65页
致谢第65-66页
参考文献第66-69页
附录: 作者在攻读硕士学位期间发表的论文第69页

论文共69页,点击 下载论文
上一篇:雷达航迹处理算法研究
下一篇:基于小波提升的彩色图像编码研究