摘要 | 第4-5页 |
Abstract | 第5-6页 |
第1章 绪论 | 第9-16页 |
1.1 课题背景与研究意义 | 第9-10页 |
1.2 国内外研究现状 | 第10-14页 |
1.2.1 数据一致性理论 | 第11-13页 |
1.2.2 数据完整性理论 | 第13页 |
1.2.3 大数据可用性违背的检测与修复研究 | 第13页 |
1.2.4 数据可用性各子性质的关联关系分析 | 第13-14页 |
1.3 主要研究内容 | 第14页 |
1.4 论文组织结构 | 第14-16页 |
第2章 相关理论 | 第16-23页 |
2.1 数据一致性理论 | 第16-21页 |
2.1.1 条件函数依赖理论 | 第16-19页 |
2.1.2 扩展的条件函数依赖理论 | 第19-21页 |
2.2 数据完整性理论 | 第21页 |
2.3 Hadoop上的MapReduce编程模型 | 第21-22页 |
2.4 本章小结 | 第22-23页 |
第3章 基于改进条件函数依赖的数据一致性违背的检测与修复 | 第23-39页 |
3.1 xCFDs的定义 | 第23-24页 |
3.2 xCFDs与条件函数依赖理论体系的兼容性 | 第24-25页 |
3.2.1 CFDs在eCFDs中表达 | 第24页 |
3.2.2 eCFDs在xCFDs中表达 | 第24-25页 |
3.3 主数据在CFDs中表达 | 第25-27页 |
3.4 基于xCFDs的一致性违背检测 | 第27-32页 |
3.4.1 xCFDs中的规则匹配 | 第27-29页 |
3.4.2 eCFDs中的一致性违背检测思想 | 第29-31页 |
3.4.3 xCFDs中的一致性违背检测 | 第31-32页 |
3.5 基于xCFDs的一致性错误修复 | 第32-38页 |
3.5.1 等价类 | 第33-34页 |
3.5.2 冲突消除 | 第34-35页 |
3.5.3 单元组违背修复 | 第35-36页 |
3.5.4 多元组违背修复 | 第36-38页 |
3.6 本章小结 | 第38-39页 |
第4章 基于kNN的数据完整性违背的修复 | 第39-46页 |
4.1 完整性违背检测 | 第39-40页 |
4.2 各属性的距离度量 | 第40-43页 |
4.2.1 距离度量的性质 | 第40页 |
4.2.2 分类属性的距离度量 | 第40-41页 |
4.2.3 文本属性的距离度量 | 第41-42页 |
4.2.4 数值属性的距离度量 | 第42页 |
4.2.5 元组间的距离度量 | 第42-43页 |
4.3 完整性违背修复 | 第43-45页 |
4.3.1 经典填充方法 | 第43-44页 |
4.3.2 基于mean-kNN的缺失值填充 | 第44-45页 |
4.4 本章小结 | 第45-46页 |
第5章 Hadoop上的检测与修复实验 | 第46-60页 |
5.1 实验环境 | 第46页 |
5.2 基于xCFDs的一致性违背检测与修复实验 | 第46-52页 |
5.2.1 Hadoop上的检测与修复算法设计 | 第46-48页 |
5.2.2 实验结果及分析 | 第48-52页 |
5.3 基于主数据的一致性违背修复实验 | 第52-54页 |
5.3.1 Hadoop上的修复算法设计 | 第52-54页 |
5.3.2 实验结果及分析 | 第54页 |
5.4 完整性违背检测与修复 | 第54-58页 |
5.4.1 Hadoop上的检测与修复算法设计 | 第54-57页 |
5.4.2 实验结果与分析 | 第57-58页 |
5.5 本章小结 | 第58-60页 |
结论 | 第60-61页 |
参考文献 | 第61-64页 |
攻读学位期间发表的学术论文 | 第64-66页 |
致谢 | 第66-67页 |