摘要 | 第3-4页 |
Abstract | 第4-5页 |
第一章 绪论 | 第8-18页 |
1.1 研究背景及意义 | 第8-9页 |
1.2 数据清洗的研究现状 | 第9-13页 |
1.2.1 空间数据集成研究现状 | 第10-12页 |
1.2.2 数据清洗研究现状 | 第12-13页 |
1.3 规则引擎的研究现状 | 第13-16页 |
1.3.1 Rete算法及传统规则引擎框架 | 第14-16页 |
1.3.2 分布式环境下的规则引擎相关研究 | 第16页 |
1.4 本文主要研究内容 | 第16-17页 |
1.5 本文的组织结构 | 第17-18页 |
第二章 大数据技术与国土大数据概况 | 第18-29页 |
2.1 大数据技术 | 第18-23页 |
2.1.1 Hadoop生态圈中的存储框架 | 第19-21页 |
2.1.2 Hadoop生态圈中的计算框架 | 第21-22页 |
2.1.3 Hadoop生态圈中的其他组件 | 第22-23页 |
2.2 国土大数据概况分析 | 第23-28页 |
2.2.1 国土大数据组织形式 | 第24-25页 |
2.2.2 国土大数据存储结构 | 第25-26页 |
2.2.3 国土大数据特点总结 | 第26页 |
2.2.4 国土大数据清洗需求 | 第26-28页 |
2.3 本章小结 | 第28-29页 |
第三章 规则引擎驱动下的国土大数据清洗方法 | 第29-73页 |
3.1 国土空间大数据清洗框架设计 | 第29-30页 |
3.2 国土空间大数据集成转换方法 | 第30-45页 |
3.2.1 ArcSDE与Geodatabase存储结构 | 第32-34页 |
3.2.2 SDELOB压缩方式 | 第34-40页 |
3.2.3 Sqoop思想的空间数据并行集成方法 | 第40-45页 |
3.3 规则引擎驱动下的国土空间大数据清洗方法 | 第45-72页 |
3.3.1 国土空间数据清洗规则编码设计 | 第45-47页 |
3.3.2 清洗规则库设计 | 第47-55页 |
3.3.3 规则引擎功能模块分析设计 | 第55-64页 |
3.3.4 核心代码介绍 | 第64-72页 |
3.4 本章小结 | 第72-73页 |
第四章 方法验证与评价 | 第73-79页 |
4.1 测试环境 | 第73-74页 |
4.1.1 国土CDH集群环境 | 第73-74页 |
4.1.2 国土Oracle Rac环境 | 第74页 |
4.2 方法测试与结果分析 | 第74-78页 |
4.2.1 测试数据 | 第75页 |
4.2.2 大数据集成方法性能分析 | 第75-76页 |
4.2.3 大数据清洗方法精度分析 | 第76-77页 |
4.2.4 大数据清洗方法性能分析 | 第77-78页 |
4.3 本章小节 | 第78-79页 |
第五章 总结与展望 | 第79-81页 |
5.1 工作总结 | 第79页 |
5.2 不足与展望 | 第79-81页 |
参考文献 | 第81-82页 |