基于HDFS分布式并行文件系统副本策略研究
摘要 | 第3-5页 |
ABSTRACT | 第5-6页 |
目录 | 第7-9页 |
1 绪论 | 第9-15页 |
1.1 研究背景 | 第9-10页 |
1.2 国内外研究现状及意义 | 第10-11页 |
1.3 研究内容及思路 | 第11-12页 |
1.4 论文组织结构 | 第12-14页 |
1.5 本章小结 | 第14-15页 |
2 分布式文件系统HDFS | 第15-26页 |
2.1 HDFS整体架构及相关技术 | 第15-21页 |
2.1.1 HDFS整体架构 | 第15-16页 |
2.1.2 HDFS中的数据的读写机制 | 第16-19页 |
2.1.3 HDFS中文件的删除与恢复 | 第19-20页 |
2.1.4 HDFS的健壮性与安全模式 | 第20-21页 |
2.2 HDFS与GFS文件系统的比较 | 第21-25页 |
2.2.1 GFS的体系结构 | 第21-22页 |
2.2.2 GFS的副本管理策略 | 第22-23页 |
2.2.3 HDFS与GFS对比分析 | 第23-25页 |
2.3 本章小结 | 第25-26页 |
3 副本管理策略的研究与分析 | 第26-35页 |
3.1 副本管理策略的研究目的 | 第26-27页 |
3.2 分布式系统副本管理相关理论 | 第27-29页 |
3.2.1 副本管理基本概念 | 第27-28页 |
3.2.2 HDFS动态副本管理模型 | 第28-29页 |
3.3 副本放置策略分析 | 第29-32页 |
3.3.1 副本放置策略的依据 | 第29-30页 |
3.3.2 HDFS默认副本放置策略 | 第30-31页 |
3.3.3 副本放置算法研究现状 | 第31-32页 |
3.4 副本删除策略分析 | 第32-34页 |
3.4.1 副本删除策略的依据 | 第32页 |
3.4.2 HDFS默认副本删除策略 | 第32-33页 |
3.4.3 副本删除算法研究现状 | 第33-34页 |
3.5 本章小结 | 第34-35页 |
4 基于距离和负载信息的副本放置策略 | 第35-47页 |
4.1 相关背景知识 | 第35-36页 |
4.2 HDFS默认数据放置的局限性 | 第36-37页 |
4.3 副本放置策略的改进思想 | 第37-40页 |
4.4 改进的数据放置策略的实现 | 第40-42页 |
4.4.1 节点效用的计算 | 第40页 |
4.4.2 DLPS副本放置算法 | 第40-42页 |
4.5 实验结果与分析 | 第42-46页 |
4.5.1 实验参数设置 | 第42-43页 |
4.5.2 模拟实验结果分析 | 第43-46页 |
4.6 本章小结 | 第46-47页 |
5 基于价值评估的副本删除策略 | 第47-56页 |
5.1 副本删除策略的必要性 | 第47-48页 |
5.2 传统副本删除算法的缺陷 | 第48-49页 |
5.3 VARS副本策略的基本思想 | 第49-50页 |
5.4 价值评估策略的实现 | 第50-52页 |
5.4.1 模型涉及的基本概念 | 第50-52页 |
5.4.2 VARS策略的改进算法 | 第52页 |
5.5 实验结果与分析 | 第52-54页 |
5.5.1 实验参数设置 | 第52-53页 |
5.5.2 模拟实验结果分析 | 第53-54页 |
5.6 本章小结 | 第54-56页 |
6 总结与展望 | 第56-57页 |
6.1 本文工作总结 | 第56页 |
6.2 展望 | 第56-57页 |
参考文献 | 第57-61页 |
攻读学位期间取得的研究成果 | 第61-62页 |
致谢 | 第62-64页 |