| 摘要 | 第4-5页 |
| ABSTRACT | 第5-6页 |
| 第一章 绪论 | 第9-13页 |
| 1.1 研究背景及研究意义 | 第9-10页 |
| 1.2 国内外研究现状 | 第10-11页 |
| 1.2.1 HDFS架构的改进 | 第10页 |
| 1.2.2 合并内容的优化选择 | 第10-11页 |
| 1.3 研究生期间完成的工作 | 第11-12页 |
| 1.4 论文主要内容与结构 | 第12-13页 |
| 第二章 HDFS相关技术与常见改进方式 | 第13-25页 |
| 2.1 HDFS架构概述 | 第13-15页 |
| 2.2 HDFS数据流程 | 第15-17页 |
| 2.3 HDFS的实现 | 第17-21页 |
| 2.3.1 INode | 第17-18页 |
| 2.3.2 FSDirectory类 | 第18-19页 |
| 2.3.3 Block类 | 第19-20页 |
| 2.3.4 BlockManager | 第20-21页 |
| 2.4 相关技术 | 第21-23页 |
| 2.4.1 Hadoop Archives归档文件 | 第21-22页 |
| 2.4.2 HDFS文件缓存管理 | 第22-23页 |
| 2.4.3 Protocol Buffer | 第23页 |
| 2.5 本章小结 | 第23-25页 |
| 第三章 基于层次结构的HDFS小文件聚合 | 第25-41页 |
| 3.1 聚合简介 | 第25-26页 |
| 3.2 基于层次结构的逻辑文件名 | 第26-28页 |
| 3.3 基于逻辑文件名改进的基数排序 | 第28-33页 |
| 3.3.1 聚合排序简介 | 第28-29页 |
| 3.3.2 基于逻辑文件名的聚合排序算法 | 第29-33页 |
| 3.4 相关索引结构与聚合 | 第33-38页 |
| 3.4.1 透明的小文件访问机制 | 第33-34页 |
| 3.4.2 基于HAR的改进的小文件索引机制 | 第34-36页 |
| 3.4.3 一种有效的的HDFS块内聚合机制 | 第36-38页 |
| 3.5 仿真实验与分析 | 第38-40页 |
| 3.6 本章小结 | 第40-41页 |
| 第四章 基于层次结构的HDFS小文件缓存与预取 | 第41-59页 |
| 4.1 预取与缓存整体设计 | 第41-43页 |
| 4.2 基于层次结构的HDFS小文件缓存 | 第43-50页 |
| 4.2.1 DataNode的元数据缓存 | 第43-46页 |
| 4.2.2 客户端的元数据缓存 | 第46-50页 |
| 4.3 基于层次结构的HDFS小文件预取 | 第50-54页 |
| 4.3.1 客户端聚合文件数据内容的动态智能预取 | 第50页 |
| 4.3.2 动态预取算法 | 第50-53页 |
| 4.3.3 客户端预取数据管理维护 | 第53-54页 |
| 4.4 仿真实验及分析 | 第54-58页 |
| 4.4.1 实验环境 | 第54-55页 |
| 4.4.2 实验结果及相关性分析 | 第55-58页 |
| 4.4.3 实验总结 | 第58页 |
| 4.5 本章小结 | 第58-59页 |
| 第五章 总结与展望 | 第59-61页 |
| 5.1 论文总结 | 第59-60页 |
| 5.2 进一步研究工作 | 第60-61页 |
| 参考文献 | 第61-63页 |
| 致谢 | 第63-65页 |
| 作者攻读学位期间发表的学术论文目录 | 第65页 |