ETL技术在DCPC决策支持系统中的研究与应用
| 摘要 | 第5-6页 |
| Abstract | 第6页 |
| 第一章 绪论 | 第11-15页 |
| 1.1 课题研究背景 | 第11-12页 |
| 1.2 当前存在问题与发展趋势 | 第12-13页 |
| 1.3 研究内容及所做工作 | 第13-14页 |
| 1.3.1 主要研究内容 | 第13页 |
| 1.3.2 所做主要工作 | 第13-14页 |
| 1.4 本文章节安排 | 第14-15页 |
| 第二章 相关理论介绍 | 第15-29页 |
| 2.1 数据仓库介绍 | 第15-18页 |
| 2.1.1 数据仓库的概念及特点 | 第15-17页 |
| 2.1.2 数据仓库的构成 | 第17-18页 |
| 2.1.2.1 数据源系统 | 第17页 |
| 2.1.2.2 数据集结区 | 第17-18页 |
| 2.1.2.3 数据展示区 | 第18页 |
| 2.1.2.4 数据访问工具 | 第18页 |
| 2.2 OLAP技术介绍 | 第18-22页 |
| 2.2.1 OLAP概念 | 第18页 |
| 2.2.2 OLAP模型介绍 | 第18-20页 |
| 2.2.3 OLAP的基本分析操作 | 第20-21页 |
| 2.2.4 OLAP分类 | 第21-22页 |
| 2.3 ETL概述 | 第22-25页 |
| 2.3.1 ETL概念 | 第22页 |
| 2.3.2 ETL主要功能 | 第22页 |
| 2.3.3 ETL常用工具介绍 | 第22-25页 |
| 2.3.3.1 Datastage | 第22-24页 |
| 2.3.3.2 Informatica | 第24-25页 |
| 2.3.3.3 kettle | 第25页 |
| 2.4 元数据管理 | 第25-29页 |
| 2.4.1 元数据概念 | 第26页 |
| 2.4.2 元数据标准化 | 第26-27页 |
| 2.4.3 元数据管理设计原则 | 第27-29页 |
| 第三章 需求分析与总体设计 | 第29-37页 |
| 3.1 需求概述 | 第29-30页 |
| 3.2 双鹤药业企业特点 | 第30-33页 |
| 3.2.1 组织架构 | 第31-32页 |
| 3.2.2 医药企业数据特点 | 第32页 |
| 3.2.3 数据分析特点 | 第32-33页 |
| 3.3 数据仓库总体设计 | 第33-34页 |
| 3.3.1 系统的拓扑结构 | 第33-34页 |
| 3.3.2 系统的功能结构 | 第34页 |
| 3.4 系统软硬件配置 | 第34-35页 |
| 3.4.1 硬件配置 | 第35页 |
| 3.4.2 软件配置 | 第35页 |
| 3.5 系统功能模块设计 | 第35-37页 |
| 第四章 系统概要设计 | 第37-49页 |
| 4.1 数据集成方案设计 | 第37-39页 |
| 4.2 ETL设计 | 第39-49页 |
| 4.2.1 ETL工具选择 | 第39-41页 |
| 4.2.2 数据抽取 | 第41-43页 |
| 4.2.2.1 抽取策略 | 第41-43页 |
| 4.2.2.2 数据映射 | 第43页 |
| 4.2.2.3 平面文件 | 第43页 |
| 4.2.2.4 数据中转 | 第43页 |
| 4.2.3 数据清洗 | 第43-45页 |
| 4.2.3.1 数据异常检测 | 第44页 |
| 4.2.3.2 数据异常处理 | 第44页 |
| 4.2.3.3 数据完善 | 第44-45页 |
| 4.2.4 维表设计 | 第45-48页 |
| 4.2.4.1 维表结构 | 第45-46页 |
| 4.2.4.2 维表变化方式 | 第46页 |
| 4.2.4.3 缓慢变化维 | 第46-48页 |
| 4.2.4.4 层次化维表 | 第48页 |
| 4.2.5 事实表 | 第48-49页 |
| 第五章 详细设计 | 第49-67页 |
| 5.1 抽取系统 | 第49-52页 |
| 5.1.1 数据库抽取 | 第49-52页 |
| 5.1.2 系统日志抽取 | 第52页 |
| 5.1.3 数据映射 | 第52页 |
| 5.2 数据清洗 | 第52-53页 |
| 5.2.1 数据回溯 | 第53页 |
| 5.3 维表设计 | 第53-64页 |
| 5.3.1 具体维表设计 | 第54-63页 |
| 5.3.1.1 时间维 | 第54-55页 |
| 5.3.1.2 客户维 | 第55-57页 |
| 5.3.1.3 业务员维 | 第57-58页 |
| 5.3.1.4 科目维 | 第58-59页 |
| 5.3.1.5 组织维 | 第59-61页 |
| 5.3.1.6 产品维 | 第61-63页 |
| 5.3.2 维度建模去范式化 | 第63页 |
| 5.3.2.1 其他维表 | 第63页 |
| 5.3.3 维表的数据验证 | 第63-64页 |
| 5.4 事实表设计 | 第64-65页 |
| 5.4.1 表结构设计 | 第64页 |
| 5.4.2 事实表实现 | 第64-65页 |
| 5.4.3 事实表更新 | 第65页 |
| 5.4.4 事实表数据验证 | 第65页 |
| 5.5 ETL任务流程 | 第65-67页 |
| 5.5.1 ETL任务步骤 | 第66-67页 |
| 第六章 DCPC决策支持系统效果展示 | 第67-71页 |
| 第七章 总结 | 第71-73页 |
| 7.1 总结 | 第71页 |
| 7.2 展望 | 第71-73页 |
| 致谢 | 第73-75页 |
| 参考文献 | 第75-79页 |
| 附录 | 第79页 |
