基于HDFS的华图在线文库系统数据存储与管理研究
| 摘要 | 第4-5页 |
| Abstract | 第5页 |
| 1 绪论 | 第8-14页 |
| 1.1 研究背景及意义 | 第8-9页 |
| 1.2 国内外研究现状 | 第9-12页 |
| 1.2.1 国内研究现状 | 第10-11页 |
| 1.2.2 国外研究现状 | 第11-12页 |
| 1.3 研究目标和研究内容 | 第12-13页 |
| 1.3.1 研究目标 | 第12页 |
| 1.3.2 研究内容 | 第12-13页 |
| 1.4 本文组织结构 | 第13-14页 |
| 2 云计算与Hadoop | 第14-23页 |
| 2.1 云计算 | 第14-16页 |
| 2.1.1 云计算的概念 | 第14-15页 |
| 2.1.2 云计算的特点 | 第15-16页 |
| 2.2 云存储 | 第16-17页 |
| 2.2.1 云存储的定义 | 第16页 |
| 2.2.2 云存储的特点 | 第16-17页 |
| 2.3 云计算与云存储的关系 | 第17-18页 |
| 2.4 Hadoop | 第18-21页 |
| 2.4.1 HDFS简介 | 第19-20页 |
| 2.4.2 MapReduce简介 | 第20-21页 |
| 2.5 本章小结 | 第21-23页 |
| 3 云存储中小文件的优化 | 第23-39页 |
| 3.1 HDFS的小文件存储问题 | 第23-29页 |
| 3.1.1 HDFS的结构 | 第23-26页 |
| 3.1.2 HDFS的数据管理策略 | 第26-27页 |
| 3.1.3 小文件存储问题 | 第27-29页 |
| 3.2 小文件存取优化方案 | 第29-33页 |
| 3.2.1 在线文库系统结构 | 第30-31页 |
| 3.2.2 在线文库系统的数据存储 | 第31-33页 |
| 3.3 小文件优化方案设计 | 第33-38页 |
| 3.3.1 小文件合并与上传 | 第33-34页 |
| 3.3.2 小文件的预取 | 第34-37页 |
| 3.3.3 小文件的读取与下载 | 第37-38页 |
| 3.4 本章小结 | 第38-39页 |
| 4 在线文库系统关键技术的设计与实现 | 第39-58页 |
| 4.1 华图在线文库系统设计目标 | 第39页 |
| 4.2 在线文库系统云存储的实现 | 第39-52页 |
| 4.2.1 前台文档上传 | 第39-43页 |
| 4.2.2 小文件合并 | 第43-45页 |
| 4.2.3 文件迁移至HDFS | 第45-49页 |
| 4.2.4 文档的读取与下载 | 第49-52页 |
| 4.3 模拟实验和性能分析 | 第52-57页 |
| 4.3.0 Hadoop平台的搭建 | 第52-54页 |
| 4.3.1 数据集 | 第54-55页 |
| 4.3.2 内存测试 | 第55-56页 |
| 4.3.3 小文件读取性能测试 | 第56-57页 |
| 4.4 本章小结 | 第57-58页 |
| 5 总结与展望 | 第58-60页 |
| 5.1 工作总结 | 第58-59页 |
| 5.2 前景展望 | 第59-60页 |
| 参考文献 | 第60-64页 |
| 攻读学位期间主要研究成果 | 第64-65页 |
| 致谢 | 第65页 |
