| 摘要 | 第1-5页 |
| Abstract | 第5-9页 |
| 1 绪论 | 第9-15页 |
| ·研究背景 | 第9页 |
| ·国内外研究现状 | 第9-13页 |
| ·国外研究现状 | 第9-12页 |
| ·国内研究现状 | 第12-13页 |
| ·本文主要工作和创新点 | 第13-15页 |
| 2 Hadoop 技术研究 | 第15-19页 |
| ·云计算系统的概念 | 第15页 |
| ·Hadoop 系统介绍和分析 | 第15-19页 |
| ·Hadoop 系统的概念及架构 | 第16页 |
| ·Hadoop 各模块功能 | 第16-19页 |
| 3 分布式文件系统优化技术研究 | 第19-28页 |
| ·分布式文件系统综述 | 第19-21页 |
| ·Hadoop 的分布式文件系统 HDFS | 第21-22页 |
| ·独立的分布式文件系统 GlusterFS | 第22-25页 |
| ·分布式文件系统优化技术 | 第25-28页 |
| 4 基于 Hadoop 的分布式文件系统优化技术研究 | 第28-40页 |
| ·GlusterFS 连接 Hadoop 的存储接口实现 | 第28-30页 |
| ·GlusterFS 的扩展机制 Translator | 第28-29页 |
| ·GlusterFS 连接 Hadoop 接口的设计实现 | 第29-30页 |
| ·基于 Infiniband 的 RDMA 网络传输技术 | 第30-33页 |
| ·Infiniband 介绍 | 第30-31页 |
| ·Infiniband RDMA 与 GlusterFS 技术结合 | 第31-33页 |
| ·自动优化的数据缓存算法 GAC | 第33-37页 |
| ·数据缓存算法 | 第33页 |
| ·数据预读算法分析 | 第33-34页 |
| ·GlusterFS 当前数据缓存算法 LRU/LFU | 第34-35页 |
| ·自动优化的数据缓存算法 GAC | 第35-37页 |
| ·基于网络流量的自适应数据压缩机制 | 第37-39页 |
| ·数据压缩 | 第37页 |
| ·实现方案 | 第37-38页 |
| ·实现流程 | 第38-39页 |
| ·集成采用 GlusterFS 存储、IB 传输的优化 Hadoop 云计算平台 | 第39-40页 |
| 5 集成优化 Hadoop 系统测试结果及分析 | 第40-52页 |
| ·测试环境 | 第40-41页 |
| ·硬件组成 | 第40页 |
| ·软件环境 | 第40页 |
| ·系统结构 | 第40-41页 |
| ·文件读写性能测试 | 第41-46页 |
| ·GlusterFS 复制卷性能测试 | 第41-42页 |
| ·GlusterFS 条带卷性能测试 | 第42-43页 |
| ·GlusterFS 分布式复制卷性能测试 | 第43-44页 |
| ·IOZONE 专项读写性能测试 | 第44-45页 |
| ·本地文件系统读写测试 | 第45-46页 |
| ·4G 超大文件读写测试 | 第46页 |
| ·TCP/IP 与 Infiniband RDMA 网络传输性能对比测试 | 第46-48页 |
| ·基于 Hadoop 的云计算性能测试 | 第48-51页 |
| ·MapReduce 测试 | 第48-49页 |
| ·HBase 数据生成测试 | 第49-50页 |
| ·Hive 测试 | 第50-51页 |
| ·系统稳定性、可靠性测试 | 第51页 |
| ·稳定性测试 | 第51页 |
| ·可靠性测试 | 第51页 |
| ·测试结果总结 | 第51-52页 |
| 结论 | 第52-53页 |
| 致谢 | 第53-54页 |
| 参考文献 | 第54-57页 |
| 攻读学位期间的研究成果 | 第57页 |
