摘要 | 第1-5页 |
Abstract | 第5-9页 |
第1章 绪论 | 第9-17页 |
·课题的研究背景及意义 | 第9-12页 |
·研究背景 | 第9-11页 |
·选题意义 | 第11-12页 |
·研究现状及存在的问题 | 第12-15页 |
·HDFS 存储机制的研究现状 | 第12-14页 |
·存在问题的分析 | 第14-15页 |
·主要研究内容 | 第15页 |
·论文组织结构 | 第15-17页 |
第2章 HDFS 中小文件处理方案 | 第17-31页 |
·小文件导致的问题 | 第17-18页 |
·传统解决方法的分析 | 第18-22页 |
·Hadoop Archive 方法 | 第18-19页 |
·SequenceFile 方法 | 第19-22页 |
·Multi-NameNode Cluster 方案的设计 | 第22-30页 |
·Multi-NameNode 的总体设计 | 第22-26页 |
·集群中节点的抽象描述 | 第26-28页 |
·NameNode 内存中元数据结构的改进 | 第28-29页 |
·Multi-NameNode 性能的理论分析 | 第29-30页 |
·小结 | 第30-31页 |
第3章 HDFS 集群单点失效问题的分析 | 第31-43页 |
·Secondary NameNode 的功能 | 第31-32页 |
·QJM 方案的原理分析 | 第32-37页 |
·QJM 方案中 NameNode 的启动分析 | 第33页 |
·fsimage 与 edits 的文件名形式 | 第33-34页 |
·主从切换时的日志恢复 | 第34-37页 |
·基于 QJM 的独立磁盘阵列方案的探讨 | 第37-42页 |
·QJM 方案的不足之处 | 第37页 |
·基于 QJM 的独立磁盘阵列方案的设计 | 第37-41页 |
·RAID1 磁盘阵列备份机制的模拟 | 第41-42页 |
·小结 | 第42-43页 |
第4章 实验结果与分析 | 第43-58页 |
·实验环境的配置和 Hadoop 的部署 | 第43-47页 |
·Multi-NameNode Cluster 的实验结果和分析 | 第47-54页 |
·使用多线程模拟客户端的并发请求 | 第47-48页 |
·模拟实现的正确性验证 | 第48-50页 |
·对比实验和结果分析 | 第50-54页 |
·基于 QJM 的 RAID 方案的实验和结果分析 | 第54-57页 |
·确定 QJM 日志恢复失败的标准 | 第54页 |
·实验结果和分析 | 第54-57页 |
·小结 | 第57-58页 |
第5章 总结与展望 | 第58-60页 |
·总结 | 第58-59页 |
·展望 | 第59-60页 |
致谢 | 第60-61页 |
参考文献 | 第61-63页 |