基于HDFS的小文件处理与相关MapReduce计算模型性能的优化与改进
| 摘要 | 第1-6页 |
| Abstract | 第6-10页 |
| 第1章 绪论 | 第10-16页 |
| ·研究背景与意义 | 第10-11页 |
| ·研究现状 | 第11-14页 |
| ·关系型数据管理系统与 MapReduce 比较 | 第11-12页 |
| ·分布式文件系统 | 第12-14页 |
| ·本文工作与结构 | 第14-16页 |
| ·本文工作 | 第14-15页 |
| ·本文结构 | 第15-16页 |
| 第2章 相关技术研究 | 第16-27页 |
| ·HADOOP 系统平台介绍 | 第16-24页 |
| ·MapReduce 介绍 | 第16-22页 |
| ·HDFS 介绍 | 第22-24页 |
| ·云计算介绍 | 第24-26页 |
| ·云计算的概念 | 第25页 |
| ·云计算发展现状 | 第25-26页 |
| ·本章小结 | 第26-27页 |
| 第3章 HDFS 深入分析与海量小文件解决方案 | 第27-42页 |
| ·实体类的分析 | 第27-32页 |
| ·Storage 相关类分析 | 第27-29页 |
| ·FSDataset 相关类分析 | 第29-32页 |
| ·HAR 文件系统分析 | 第32-39页 |
| ·HadoopArchives 类分析 | 第33-37页 |
| ·HarFileSystem 类分析 | 第37-39页 |
| ·海量小文件解决方案的分析 | 第39-41页 |
| ·本章小结 | 第41-42页 |
| 第4章 HSF 的设计与实现 | 第42-55页 |
| ·HSF 的总体设计和功能分析 | 第42-43页 |
| ·HSF 的小文件解决方案 | 第42-43页 |
| ·HSF 的功能分析 | 第43页 |
| ·SEQUENCEFILE 格式详解 | 第43-46页 |
| ·URI 和索引设计 | 第46-49页 |
| ·HSF 的 URI 设计 | 第46-47页 |
| ·索引的设计 | 第47-49页 |
| ·流程分析与详细设计 | 第49-53页 |
| ·合并文件流程分析 | 第49-51页 |
| ·HSF 的详细设计 | 第51-53页 |
| ·相关实现 | 第53-54页 |
| ·本章小结 | 第54-55页 |
| 第5章 实验与数据分析 | 第55-61页 |
| ·实验目的 | 第55页 |
| ·实验环境和数据 | 第55-56页 |
| ·实验设计与结果分析 | 第56-60页 |
| ·读写小文件分析 | 第56-57页 |
| ·WordCount 实例分析 | 第57-59页 |
| ·随机读取小文件分析 | 第59-60页 |
| ·本章小结 | 第60-61页 |
| 第6章 总结与展望 | 第61-62页 |
| 参考文献 | 第62-64页 |
| 作者简介和硕士期间的主要工作 | 第64-65页 |
| 致谢 | 第65页 |
