摘要 | 第5-6页 |
Abstract | 第6-7页 |
图表目录 | 第11-14页 |
1 绪论 | 第14-24页 |
1.1 课题的背景及研究意义 | 第15-17页 |
1.2 国内外研究现状 | 第17-21页 |
1.2.1 海量数据处理 | 第17-18页 |
1.2.2 云计算研究现状 | 第18-19页 |
1.2.3 海量小文件处理 | 第19-21页 |
1.3 研究内容及主要贡献 | 第21-24页 |
1.3.1 研究内容 | 第21页 |
1.3.2 论文组织 | 第21-22页 |
1.3.3 主要贡献 | 第22-24页 |
2 海量数据处理技术分析 | 第24-39页 |
2.1 引言 | 第24页 |
2.2 海量数据的产生和特点 | 第24-26页 |
2.3 数据统合处理机制 | 第26-29页 |
2.4 云计算海量数据处理的提出和发展 | 第29-33页 |
2.4.1 云计算相关介绍 | 第29-31页 |
2.4.2 云计算与海量数据处理 | 第31-33页 |
2.5 云计算环境下的海量数据处理关键技术 | 第33-38页 |
2.5.1 虚拟化技术 | 第33-35页 |
2.5.2 存储资源分配 | 第35页 |
2.5.3 编程方式 | 第35页 |
2.5.4 异构数据访问 | 第35页 |
2.5.5 数据存储技术 | 第35-38页 |
2.6 本章小结 | 第38-39页 |
3 云计算环境下海量小文件处理模型C-MSFPM | 第39-58页 |
3.1 引言 | 第39-42页 |
3.1.1 问题描述 | 第39-42页 |
3.1.2 研究内容 | 第42页 |
3.2 云平台体系结构 | 第42-47页 |
3.2.1 基本体系结构 | 第42-43页 |
3.2.2 主流云计算平台 | 第43-47页 |
3.3 C-MSFPM模型 | 第47-56页 |
3.3.1 云环境下小文件类别划分及预处理策略 | 第47-54页 |
3.3.2 海量小文件索引结构 | 第54-55页 |
3.3.3 基于就近原则及权值相似度的文件合并算法 | 第55-56页 |
3.4 本章小结 | 第56-58页 |
4 基于C-MSFPM的数据处理 | 第58-83页 |
4.1 引言 | 第58页 |
4.2 基于XML和多Value的改进MapReduce处理架构 | 第58-66页 |
4.2.1 MapReduce原理 | 第58-62页 |
4.2.2 XML的数据模型 | 第62-64页 |
4.2.3 改进的MapReduce架构算法 | 第64-66页 |
4.3 基于内容依赖的数据查询处理 | 第66-73页 |
4.3.1 PDF文档分析 | 第66-69页 |
4.3.2 复杂任务数据处理 | 第69-71页 |
4.3.3 实验分析 | 第71-73页 |
4.4 基于云平台的车载信息数据处理系统 | 第73-81页 |
4.4.1 处理架构 | 第74-77页 |
4.4.2 数据传输协议 | 第77-78页 |
4.4.3 数据传输分层模型 | 第78-80页 |
4.4.4 实验结果及讨论 | 第80-81页 |
4.5 本章小结 | 第81-83页 |
5 海量数据存储机制研究 | 第83-100页 |
5.1 引言 | 第83-84页 |
5.2 云存储技术概述 | 第84-86页 |
5.3 基于改进遗传算法的存储任务调度机制 | 第86-96页 |
5.3.1 遗传算法 | 第86-88页 |
5.3.2 改进型遗传算法的云存储任务调度 | 第88-92页 |
5.3.3 仿真实验与分析 | 第92-96页 |
5.4 基于改进动态规划的云存储机制 | 第96-99页 |
5.4.1 动态规划算法原理 | 第96页 |
5.4.2 改进的动态规划的云存储数据分配 | 第96-98页 |
5.4.3 实验与分析 | 第98-99页 |
5.5 本章小结 | 第99-100页 |
6 工作总结和未来展望 | 第100-102页 |
6.1 工作总结 | 第100-101页 |
6.2 未来的展望 | 第101-102页 |
致谢 | 第102-103页 |
参考文献 | 第103-113页 |
附录 | 第113页 |