基于Hadoop的虚拟筛选监控模块研究
| 中文摘要 | 第3-4页 |
| Abstract | 第4页 |
| 第一章 引言 | 第7-13页 |
| 1.1 选题背景及研究意义 | 第7-10页 |
| 1.1.1 选题背景 | 第7-9页 |
| 1.1.2 研究意义 | 第9-10页 |
| 1.2 国内外研究概况 | 第10-12页 |
| 1.3 课题研究内容 | 第12页 |
| 1.4 论文组织结构 | 第12-13页 |
| 第二章 相关技术概述 | 第13-27页 |
| 2.1 Hadoop简介 | 第13-19页 |
| 2.1.1 MapReduce框架 | 第13-14页 |
| 2.1.2 Map/Reduce作业 | 第14-16页 |
| 2.1.3 JobTracker | 第16-17页 |
| 2.1.4 TaskTracker | 第17-19页 |
| 2.2 Hadoop作业调度 | 第19-23页 |
| 2.2.1 默认FIFO算法 | 第19-20页 |
| 2.2.2 其他并行算法 | 第20-21页 |
| 2.2.3 负载均衡算法 | 第21-23页 |
| 2.3 Eclipse开发平台 | 第23-24页 |
| 2.3.1 Eclipse简介 | 第23页 |
| 2.3.2 Eclipse体系结构 | 第23-24页 |
| 2.4 Ganglia监控工具 | 第24-27页 |
| 2.4.1 Ganglia简介 | 第25页 |
| 2.4.2 Ganglia工作原理 | 第25-27页 |
| 第三章 功能需求分析与研究 | 第27-37页 |
| 3.1 功能需求分析 | 第27-32页 |
| 3.1.1 监控对象 | 第28-29页 |
| 3.1.2 功能需求 | 第29-32页 |
| 3.2 监控模块功能研究 | 第32-37页 |
| 3.2.1 收集信息 | 第32-34页 |
| 3.2.2 调度Map/Reduce作业 | 第34-35页 |
| 3.2.3 平均分发作业 | 第35-37页 |
| 第四章 监控模块设计与实现 | 第37-55页 |
| 4.1 实验环境 | 第37-38页 |
| 4.1.1 硬件环境 | 第37-38页 |
| 4.1.2 软件环境 | 第38页 |
| 4.2 监控模块框架 | 第38-40页 |
| 4.3 监控模块的实现 | 第40-55页 |
| 4.3.1 调度策略 | 第40-48页 |
| 4.3.2 负载均衡 | 第48-50页 |
| 4.3.3 信息收集 | 第50-52页 |
| 4.3.4 信息展示 | 第52-55页 |
| 第五章 工作总结与展望 | 第55-57页 |
| 5.1 论文工作总结 | 第55-56页 |
| 5.2 工作展望 | 第56-57页 |
| 参考文献 | 第57-59页 |
| 在学期间的研究成果 | 第59-60页 |
| 致谢 | 第60页 |
