首页--工业技术论文--自动化技术、计算机技术论文--计算技术、计算机技术论文--一般性问题论文--理论、方法论文--算法理论论文

Hadoop平台下海量日志数据处理模型的研究及改进

摘要第1-5页
ABSTRACT第5-9页
第一章 绪论第9-16页
   ·课题背景第9-12页
     ·Google 文件系统 GFS第9-10页
     ·Map/Reduce 编程模式第10页
     ·Hadoop 技术背景第10-12页
   ·课题研究的意义第12-13页
   ·国内外研究现状第13页
   ·主要研究内容及章节安排第13-16页
     ·论文主要研究内容第13-14页
     ·论文结构第14-16页
第二章 Hadoop 平台下相关技术概述第16-21页
   ·Hadoop 云计算系统第16-17页
   ·集群作业调度的关键技术第17-20页
     ·作业调度的分类第17-18页
     ·作业调度策略第18-19页
     ·作业类型及调度方案第19-20页
   ·本章小结第20-21页
第三章 Hadoop 平台下处理模型的深入剖析第21-36页
   ·Hadoop 分布式文件系统第21-25页
     ·HDFS 的存储块第21-22页
     ·名称节点和数据节点第22页
     ·数据流第22-24页
     ·网络拓扑第24-25页
   ·Hadoop 的 I/O第25-28页
     ·文件读取类第25-27页
     ·文件输出类第27-28页
   ·MapReduce 的工作原理第28-34页
     ·MapReduce 的类型与格式第28-29页
     ·输入分片格式第29-30页
     ·MapReduce 的工作流程第30-31页
     ·MapTask 和 ReduceTask第31-34页
   ·本章小结第34-36页
第四章 处理模型中调度算法的研究及改进第36-62页
   ·默认的调度器 FIFO第36页
     ·算法设计思想第36页
     ·算法优缺点第36页
   ·计算能力调度器 Capacity Scheduler第36-38页
     ·算法特点第36-37页
     ·算法实现过程第37页
     ·计算能力调度算法的不足第37-38页
   ·公平调度器 Fair Scheduler第38-42页
     ·算法设计思想第38页
     ·算法实现过程第38页
     ·公平份额调度算法存在的不足第38-39页
     ·相关算法第39-42页
   ·改进的调度算法第42-61页
     ·红黑树的性质第42页
     ·红黑树的基本操作第42-47页
     ·基于红黑树的分层调度算法(HSBRB)第47-61页
   ·本章小结第61-62页
第五章 海量日志数据的处理及性能分析第62-75页
   ·Hadoop 集群平台的搭建第62-66页
     ·开发环境的配置第62页
     ·Hadoop 平台的搭建第62-66页
   ·海量日志数据的处理第66-70页
     ·获取专利数据第66-67页
     ·构建 MapReduce 程序第67-70页
   ·实验验证与结果分析第70-74页
     ·作业调度的衡量指标第70页
     ·性能比较实验第70-74页
     ·实验结论第74页
   ·本章小结第74-75页
第六章 总结与展望第75-77页
   ·论文工作总结第75-76页
   ·今后工作展望第76-77页
参考文献第77-80页
致谢第80-81页
攻读学位期间的研究成果第81页

论文共81页,点击 下载论文
上一篇:基于无线Mesh的无线体域网关键问题研究
下一篇:基于数字图像的刀具磨损状态监测研究