LSF中数据收集分析子系统的研究与设计
摘要 | 第1-4页 |
Abstract | 第4-7页 |
第1章 绪论 | 第7-11页 |
·研究背景、内容和意义 | 第7-8页 |
·本文的主要工作 | 第8-9页 |
·本文的组织结构 | 第9-11页 |
第2章 LSF集群作业管理系统和相关技术的研究 | 第11-23页 |
·LSF集群作业管理系统的研究 | 第11-16页 |
·集群系统 | 第11-12页 |
·LSF系统的研究 | 第12-16页 |
·LSF系统数据的研究 | 第16-18页 |
·数据仓库技术和ETL技术的研究 | 第18-21页 |
·数据仓库技术 | 第18-20页 |
·ETL技术 | 第20-21页 |
·本章小结 | 第21-23页 |
第3章 LSF中数据收集分析子系统的需求和设计 | 第23-31页 |
·子系统的设计需求 | 第23-25页 |
·系统数据现状分析 | 第23-24页 |
·子系统的需求分析 | 第24-25页 |
·子系统的设计 | 第25-30页 |
·子系统的规划 | 第25-27页 |
·子系统的设计思路 | 第27-30页 |
·本章小结 | 第30-31页 |
第4章 数据收集模块的设计与实现 | 第31-47页 |
·数据收集的设计 | 第31-32页 |
·数据收集部分的设计 | 第32-35页 |
·采样数据的收集 | 第32-33页 |
·事件型数据的收集 | 第33-34页 |
·收集器与LSF系统的接口设计 | 第34-35页 |
·数据收集的可靠性设计 | 第35页 |
·数据写入部分的设计 | 第35-38页 |
·数据写入的可靠性设计 | 第36-37页 |
·远程数据写入的设计 | 第37-38页 |
·数据收集模块的实现 | 第38-46页 |
·数据收集总体类图及描述 | 第39-41页 |
·数据收集控制器的配置文件 | 第41-42页 |
·采样数据收集的实现 | 第42-43页 |
·事件型数据收集的实现 | 第43-45页 |
·数据丢失保护机制的实现 | 第45-46页 |
·本章小结 | 第46-47页 |
第5章 数据分析处理模块的设计与实现 | 第47-59页 |
·数据分析处理的设计 | 第47-48页 |
·ETL引擎的设计 | 第48-51页 |
·ETL引擎的整体设计 | 第48-49页 |
·ETL流程的设计 | 第49-51页 |
·聚合转换及其转换信息表的设计 | 第51页 |
·数据分析处理模块的实现 | 第51-55页 |
·数据分析处理总体类图及描述 | 第52-53页 |
·数据分析处理序列图及描述 | 第53-55页 |
·作业吞吐量的数据分析处理过程实例 | 第55-57页 |
·作业吞吐量相关原数据的抽取 | 第55-56页 |
·对抽取的数据进行转换处理 | 第56-57页 |
·数据的装载 | 第57页 |
·本章小结 | 第57-59页 |
第6章 系统测试与分析 | 第59-67页 |
·测试环境 | 第59页 |
·功能测试 | 第59-64页 |
·性能测试 | 第64-65页 |
·本章小结 | 第65-67页 |
第7章 总结与展望 | 第67-69页 |
致谢 | 第69-71页 |
参考文献 | 第71-73页 |
硕士在读期间发表论文 | 第73页 |