| 摘要 | 第5-6页 |
| Abstract | 第6页 |
| 第1章 绪论 | 第11-20页 |
| 1.1 研究背景和意义 | 第11-14页 |
| 1.2 国内外研究现状 | 第14-17页 |
| 1.2.1 相似性比较 | 第14-15页 |
| 1.2.2 可视化分析 | 第15-16页 |
| 1.2.3 实时监控 | 第16-17页 |
| 1.3 本文的研究内容 | 第17-18页 |
| 1.4 本文的章节安排 | 第18-20页 |
| 第2章 相关背景 | 第20-31页 |
| 2.1 Hadoop | 第20-29页 |
| 2.1.1 Hadoop的基本概念 | 第22页 |
| 2.1.2 Hadoop的主要构件 | 第22-24页 |
| 2.1.3 Hadoop的工作机制 | 第24-27页 |
| 2.1.4 Hadoop的特点 | 第27-29页 |
| 2.2 log4j | 第29页 |
| 2.3 sysstat | 第29页 |
| 2.4 文本数据挖掘 | 第29-31页 |
| 第3章 系统设计与实现 | 第31-42页 |
| 3.1 日志收集模块 | 第31-33页 |
| 3.1.1 Hadoop日志的收集 | 第31-32页 |
| 3.1.2 系统日志的收集 | 第32-33页 |
| 3.2 自动诊断模块 | 第33-37页 |
| 3.2.1 第一步:问题节点的定位 | 第34-36页 |
| 3.2.2 第二步:错误根源分析 | 第36-37页 |
| 3.2.3 阀值的设定 | 第37页 |
| 3.3 可视化诊断模块 | 第37-42页 |
| 3.3.1 Hadoop MapReduce任务图 | 第38-39页 |
| 3.3.2 Hadoop MapReduce数据图 | 第39-40页 |
| 3.3.3 Hadoop MapReduce度量时序图 | 第40-42页 |
| 第4章 系统的测试与评估 | 第42-55页 |
| 4.1 实验准备 | 第42页 |
| 4.1.1 作业的的选择 | 第42页 |
| 4.1.2 错误的注入 | 第42页 |
| 4.2 无错误注入集群表现 | 第42-43页 |
| 4.3 错误注入后集群的表现 | 第43-46页 |
| 4.4 自动诊断算法准确性分析 | 第46-49页 |
| 4.4.1 错误节点定位算法准确性分析 | 第47-48页 |
| 4.4.2 问题根源定位算法准确性分析 | 第48页 |
| 4.4.3 错误定位算法准确性以及之前算法的比较 | 第48-49页 |
| 4.5 可视化模块的应用 | 第49-55页 |
| 4.5.1 Hadoop作业结构的展示 | 第49-50页 |
| 4.5.2 配置问题 | 第50-51页 |
| 4.5.3 磁盘空间不足 | 第51-52页 |
| 4.5.4 节点性能问题 | 第52-53页 |
| 4.5.5 问题根源分析 | 第53-55页 |
| 结论 | 第55-56页 |
| 参考文献 | 第56-59页 |
| 附录A 攻读学位期间所发表的学术论文目录 | 第59-60页 |
| 致谢 | 第60页 |
