| 中文摘要 | 第1-4页 |
| Abstract | 第4-9页 |
| 第1章 绪论 | 第9-18页 |
| ·云计算概述 | 第9-12页 |
| ·云计算的概念及产生 | 第9-10页 |
| ·国内外云计算发展 | 第10-12页 |
| ·研究问题及意义 | 第12-13页 |
| ·相关课题国内外研究现状 | 第13-16页 |
| ·传统数据质量相关课题研究 | 第14-16页 |
| ·大数据集中的数据质量相关课题研究 | 第16页 |
| ·本文主要研究工作 | 第16-17页 |
| ·本文章节安排 | 第17-18页 |
| 第2章 Hadoop框架结构及条件函数依赖的研究 | 第18-27页 |
| ·MapReduce基本原理 | 第18-20页 |
| ·实现了MapReduce框架的Hadoop开源项目 | 第20-25页 |
| ·Hadoop平台框架 | 第20-23页 |
| ·Hadoop工作流程 | 第23-25页 |
| ·条件函数依赖约束 | 第25-26页 |
| ·本章小结 | 第26-27页 |
| 第3章 基于Hadoop平台的实体识别系统中的任务合并技术的研究 | 第27-50页 |
| ·Hadoop框架中任务间共享机制 | 第27-34页 |
| ·输入共享机制 | 第28-30页 |
| ·Map中间结果共享机制 | 第30-32页 |
| ·共享Map函数机制 | 第32-34页 |
| ·MapReduce任务共享的代价模型 | 第34-40页 |
| ·单任务单独执行代价 | 第35-38页 |
| ·多任务合并执行代价 | 第38-40页 |
| ·基于输入共享机制的分组算法 | 第40-45页 |
| ·问题定义 | 第40-42页 |
| ·合并分组算法 | 第42-43页 |
| ·改进分组算法 | 第43-45页 |
| ·基于Map中间结果共享机制的分组算法 | 第45-49页 |
| ·问题定义 | 第45-47页 |
| ·基于Map中间结果共享机制的分组算法的改进 | 第47-49页 |
| ·本章小结 | 第49-50页 |
| 第4章 基于Hadoop平台的实体识别系统的实现 | 第50-57页 |
| ·任务优化分组中的子任务标记 | 第50-53页 |
| ·共享输入机制中的子任务区分 | 第50-51页 |
| ·Map中间结果共享机制中的子任务区分 | 第51-53页 |
| ·Map函数实现 | 第53-55页 |
| ·Reduce函数实现 | 第55页 |
| ·Combine函数实现 | 第55-56页 |
| ·本章小结 | 第56-57页 |
| 第5章 系统性能分析 | 第57-66页 |
| ·系统环境 | 第57-58页 |
| ·系统运行环境介绍 | 第57页 |
| ·实验数据 | 第57-58页 |
| ·系统参数设定 | 第58-59页 |
| ·合并条件函数依赖约束中的tableau实例 | 第59-60页 |
| ·基于共享输入数据机制的合并分组策略的性能分析 | 第60-64页 |
| ·合并所有输入任务作为单一任务 | 第60-62页 |
| ·合并分组算法IterMergeJobs性能分析 | 第62-64页 |
| ·基于Map中间结果共享机制的合并分组策略的性能分析 | 第64-65页 |
| ·本章小结 | 第65-66页 |
| 结论 | 第66-68页 |
| 参考文献 | 第68-74页 |
| 致谢 | 第74页 |
