摘要 | 第4-5页 |
Abstract | 第5页 |
第一章 绪论 | 第8-14页 |
1.1 研究背景及意义 | 第8页 |
1.2 国内外研究现状 | 第8-12页 |
1.2.1 Apache Chukwa | 第9页 |
1.2.2 Cloudera Flume | 第9-11页 |
1.2.3 Facebook Scribe | 第11-12页 |
1.2.4 国内现状 | 第12页 |
1.3 论文研究内容与研究目标 | 第12-13页 |
1.4 论文组织结构 | 第13-14页 |
第二章 银行交易日志信息数据采集系统的需求分析与总体设计 | 第14-31页 |
2.1 银行基础数据平台的介绍与系统结构 | 第14-16页 |
2.1.1 数据源 | 第14-15页 |
2.1.2 数据存储与管理 | 第15-16页 |
2.1.3 联机分析处理(OLAP) | 第16页 |
2.1.4 业务 | 第16页 |
2.2 数据源采集方式介绍与系统改进 | 第16-19页 |
2.2.1 现有数据源采集方式 | 第16-18页 |
2.2.2 改进后数据源采集方式 | 第18-19页 |
2.3 银行交易日志信息数据采集系统的需求分析 | 第19-20页 |
2.4 银行交易日志信息数据采集系统的设计方案 | 第20-22页 |
2.4.1 分支机构数据采集客户端 | 第21页 |
2.4.2 核心模块 | 第21页 |
2.4.3 配置文件解析 | 第21-22页 |
2.4.4 多进程 | 第22页 |
2.4.5 负载均衡 | 第22页 |
2.4.6 数据缓冲 | 第22页 |
2.4.7 DCS升级与动态配置文件加载 | 第22页 |
2.4.8 异常处理模块 | 第22页 |
2.5 银行交易日志信息数据采集系统关键技术 | 第22-30页 |
2.5.1 多进程模型 | 第23-25页 |
2.5.2 数据缓冲队列 | 第25-28页 |
2.5.3 信号signal处理机制 | 第28-30页 |
2.6 本章小结 | 第30-31页 |
第三章 银行交易日志信息数据采集系统的实现 | 第31-47页 |
3.1 系统开发环境与运行环境 | 第31页 |
3.2 分支机构数据采集客户端设计与实现 | 第31-33页 |
3.2.1 功能描述 | 第31页 |
3.2.2 主要流程图 | 第31-32页 |
3.2.3 核心代码 | 第32-33页 |
3.3 配置文件解析模块设计与实现 | 第33-36页 |
3.3.1 功能描述 | 第33-34页 |
3.3.2 主要流程图 | 第34-36页 |
3.3.3 核心代码 | 第36页 |
3.4 多进程模块设计与实现 | 第36-39页 |
3.4.1 功能描述 | 第36-37页 |
3.4.2 主要流程图 | 第37页 |
3.4.3 核心代码 | 第37-39页 |
3.5 负载均衡模块设计与实现 | 第39-41页 |
3.5.1 功能描述 | 第39页 |
3.5.2 主要流程图 | 第39-41页 |
3.5.3 核心代码 | 第41页 |
3.6 数据缓冲队列设计与实现 | 第41-44页 |
3.6.1 功能描述 | 第41页 |
3.6.2 主要流程图 | 第41-43页 |
3.6.3 核心代码 | 第43-44页 |
3.7 DCS升级与动态配置文件加载模块设计与实现 | 第44-46页 |
3.7.1 功能描述 | 第44页 |
3.7.2 主要流程图 | 第44-46页 |
3.7.3 核心代码 | 第46页 |
3.8 本章小结 | 第46-47页 |
第四章 银行交易日志信息数据采集系统的测试方案与性能分析 | 第47-52页 |
4.1 系统的整体测试方案 | 第47-49页 |
4.1.1 测试原理 | 第47-48页 |
4.1.2 测试环境 | 第48-49页 |
4.2 性能测试与分析 | 第49-51页 |
4.3 本章小结 | 第51-52页 |
第五章 总结与展望 | 第52-54页 |
5.1 论文主要工作总结 | 第52页 |
5.2 工作展望 | 第52-54页 |
致谢 | 第54-55页 |
参考文献 | 第55-57页 |
作者简介 | 第57页 |