应用于数据质量核查的几项数据挖掘技术研究
| 摘要 | 第1-7页 |
| Abstract | 第7-8页 |
| 目录 | 第8-10页 |
| 第1章 绪论 | 第10-14页 |
| ·课题的研究意义 | 第10页 |
| ·数据清洗技术的研究现状和发展趋势 | 第10-12页 |
| ·国外研究现状 | 第10-11页 |
| ·国内研究现状 | 第11-12页 |
| ·存在的问题 | 第12-13页 |
| ·论文的研究内容和主要工作 | 第13页 |
| ·论文的组织结构 | 第13-14页 |
| 第2章 数据质量核查技术理论综述 | 第14-23页 |
| ·数据质量的相关概念 | 第14-17页 |
| ·数据质量评估 | 第14-15页 |
| ·数据质量问题的分类 | 第15-17页 |
| ·数据质量提高技术 | 第17-20页 |
| ·模式层数据质量提高技术 | 第17-18页 |
| ·数据清洗技术 | 第18-20页 |
| ·数据清洗的框架模型 | 第20-23页 |
| 第3章 缺失数据的填充 | 第23-33页 |
| ·缺失数据概念 | 第23-24页 |
| ·缺失数据的产生原因 | 第23-24页 |
| ·数据缺失机制 | 第24页 |
| ·缺失数据处理 | 第24-27页 |
| ·缺失数据的处理步骤 | 第24-25页 |
| ·缺失数据的填充方法 | 第25-27页 |
| ·使用决策树方法对缺失数据进行填充 | 第27-32页 |
| ·决策树的建立过程 | 第27-28页 |
| ·属性选择标准 | 第28-30页 |
| ·决策树的使用过程 | 第30页 |
| ·对缺失数据进行填充 | 第30-32页 |
| ·本章小结 | 第32-33页 |
| 第4章 异常数据的检测 | 第33-47页 |
| ·异常数据相关概念 | 第33-34页 |
| ·使用关联规则检测异常数据 | 第34-43页 |
| ·数据转换 | 第35-36页 |
| ·关联规则的基本概念 | 第36-37页 |
| ·Apriori算法 | 第37-39页 |
| ·Apriori的改进算法 | 第39-42页 |
| ·算法比较分析 | 第42-43页 |
| ·异常检测 | 第43页 |
| ·异常数据的检测实验 | 第43-46页 |
| ·本章小结 | 第46-47页 |
| 第5章 相似重复记录的检测 | 第47-59页 |
| ·重复记录的检测方法 | 第47-49页 |
| ·近邻排序算法 | 第47-48页 |
| ·多趟近邻排序算法 | 第48页 |
| ·优先队列算法 | 第48页 |
| ·算法分析 | 第48-49页 |
| ·基于权值分组的重复记录检测方法 | 第49-55页 |
| ·基本思想 | 第49-50页 |
| ·应用等级法计算字段权值 | 第50-51页 |
| ·数据集的分割 | 第51-52页 |
| ·记录匹配算法 | 第52-53页 |
| ·字段匹配算法 | 第53-55页 |
| ·实现多趟查找 | 第55页 |
| ·测试实验 | 第55-58页 |
| ·本章小结 | 第58-59页 |
| 第6章 总结与展望 | 第59-61页 |
| ·全文总结 | 第59页 |
| ·工作展望 | 第59-61页 |
| 致谢 | 第61-62页 |
| 参考文献 | 第62-66页 |
| 攻读硕士学位期间发表的论文 | 第66页 |