基于性能预估的Hadoop参数自动调优系统
摘要 | 第4-5页 |
Abstract | 第5页 |
1 绪论 | 第7-12页 |
1.1 研究背景和问题提出 | 第7-8页 |
1.2 国内外研究现状 | 第8-10页 |
1.3 研究内容 | 第10-11页 |
1.4 文章框架结构 | 第11-12页 |
2 Hadoop 参数自动调优系统设计 | 第12-25页 |
2.1 HCOpt 系统概述 | 第12-13页 |
2.2 Hadoop 简介 | 第13-20页 |
2.3 HCOpt 系统的功能模块 | 第20-23页 |
2.4 HCOpt 系统的工作流程 | 第23-24页 |
2.5 小结 | 第24-25页 |
3 HCOpt 系统的主要实现技术 | 第25-33页 |
3.1 Hadoop 应用程序动态监控 | 第25-26页 |
3.2 MapReduce 作业性能预估技术 | 第26-28页 |
3.3 HCOpt 系统中参数调优算法 | 第28-32页 |
3.4 小结 | 第32-33页 |
4 系统测试与性能分析 | 第33-44页 |
4.1 测试环境 | 第33-34页 |
4.2 功能测试 | 第34-39页 |
4.3 性能测试和分析 | 第39-43页 |
4.4 小结 | 第43-44页 |
5 总结及展望 | 第44-46页 |
致谢 | 第46-48页 |
参考文献 | 第48-52页 |
附录1 攻读学位期间申请的国家发明专利目录 | 第52页 |