摘要 | 第3-4页 |
Abstract | 第4-5页 |
1 绪论 | 第8-12页 |
1.1 选题背景意义 | 第8-9页 |
1.2 国内外现状 | 第9-10页 |
1.3 本论文主要研究工作 | 第10-12页 |
2 证券风险监控数据质量知识简介 | 第12-25页 |
2.1 证券简介 | 第12-15页 |
2.2 风险监控简介 | 第15页 |
2.3 数据质量的相关简介 | 第15-16页 |
2.3.1 数据本身的数据质量 | 第15-16页 |
2.3.2 数据的过程质量 | 第16页 |
2.4 ETL(Extract Transform Load)工具—Kettle | 第16-18页 |
2.5 MongoDB简介 | 第18-19页 |
2.6 数据仓库 | 第19-21页 |
2.7 正则表达式 | 第21-24页 |
2.8 本章小结 | 第24-25页 |
3 数据质量监测 | 第25-32页 |
3.1 数据质量 | 第25-28页 |
3.1.1 数据质量的检测点 | 第26-27页 |
3.1.2 数据质量的检测规则 | 第27-28页 |
3.2 ETL转换过程 | 第28-31页 |
3.3 运行环境 | 第31页 |
3.4 本章小结 | 第31-32页 |
4 系统设计及实现 | 第32-58页 |
4.1. 总体设计 | 第32-38页 |
4.2. ETL之数据抽取 | 第38-40页 |
4.3 规则管理 | 第40-46页 |
4.3.1 规范化的规则管理 | 第41-44页 |
4.3.1.1 映射规则 | 第41-43页 |
4.3.1.2 格式化字符规则 | 第43页 |
4.3.1.3 正则处理规则 | 第43-44页 |
4.3.1.4 转换类型规则 | 第44页 |
4.3.2 衡量方式 | 第44-46页 |
4.4 规则包的管理 | 第46-47页 |
4.5 数据监测管理 | 第47-54页 |
4.5.1 检测计划 | 第47-48页 |
4.5.2 校验记录 | 第48-51页 |
4.5.3 部分相关表格 | 第51-54页 |
4.6 实现截图 | 第54-57页 |
4.7 本章小结 | 第57-58页 |
5 总结和展望 | 第58-59页 |
参考文献 | 第59-61页 |
附录A 图索引 | 第61-62页 |
Appendix A Figure Index | 第62-63页 |
附录B 表索引 | 第63-64页 |
Appendix B Table Index | 第64-65页 |
附录C 部分核心代码 | 第65-70页 |
致谢 | 第70-71页 |