基于Hadoop的海量小文件处理方法的研究
| 摘要 | 第1-5页 |
| ABSTRACT | 第5-11页 |
| 第1章 引言 | 第11-16页 |
| ·研究背景 | 第11-14页 |
| ·Hadoop 的出现 | 第11-12页 |
| ·对Hadoop 技术上的新需求 | 第12-14页 |
| ·研究的内容与意义 | 第14-15页 |
| ·论文的组织结构 | 第15-16页 |
| 第2章 相关工作 | 第16-28页 |
| ·Hadoop 分布式平台结构 | 第16-21页 |
| ·HDFS 分布式存储 | 第16-19页 |
| ·MapReduce 分布式计算 | 第19-21页 |
| ·Hadoop 处理小文件时存在的问题 | 第21-23页 |
| ·存储问题 | 第22页 |
| ·访问处理问题 | 第22-23页 |
| ·研究现状 | 第23-24页 |
| ·Trie 树索引 | 第24-27页 |
| ·Trie 树定义 | 第24-25页 |
| ·Trie 树的搜索 | 第25-26页 |
| ·Trie 树的操作 | 第26-27页 |
| ·本章小结 | 第27-28页 |
| 第3章 SFMS 系统 | 第28-45页 |
| ·SFMS 系统的基本思想与结构 | 第28-29页 |
| ·合并器 | 第29-31页 |
| ·索引器 | 第31-38页 |
| ·索引结构 | 第31-35页 |
| ·索引构建 | 第35-38页 |
| ·分片器 | 第38-42页 |
| ·算法描述 | 第38-39页 |
| ·树的分裂 | 第39-41页 |
| ·举例说明 | 第41-42页 |
| ·放置器 | 第42-44页 |
| ·算法描述 | 第42-43页 |
| ·文件块更新 | 第43页 |
| ·举例说明 | 第43-44页 |
| ·本章小结 | 第44-45页 |
| 第4章 小文件的访问和更新 | 第45-59页 |
| ·文件访问 | 第45-51页 |
| ·单个文件的访问 | 第45-50页 |
| ·批量文件的访问 | 第50-51页 |
| ·小文件的批量更新 | 第51-58页 |
| ·小文件的批量添加策略 | 第51-54页 |
| ·小文件的批量删除策略 | 第54-58页 |
| ·本章小结 | 第58-59页 |
| 第5章 实验与分析 | 第59-66页 |
| ·实验环境 | 第59页 |
| ·模拟实现 | 第59-61页 |
| ·主要功能类 | 第59-60页 |
| ·元数据信息表 | 第60-61页 |
| ·实验结果分析与比较 | 第61-65页 |
| ·写入测试 | 第61-63页 |
| ·访问测试 | 第63-64页 |
| ·删除测试 | 第64-65页 |
| ·本章小结 | 第65-66页 |
| 第6章 结论与展望 | 第66-68页 |
| ·结论 | 第66-67页 |
| ·进一步的工作 | 第67-68页 |
| 致谢 | 第68-69页 |
| 参考文献 | 第69-71页 |
| 攻读学位期间发表的学术论文及参加科研情况 | 第71-72页 |
