首页--工业技术论文--自动化技术、计算机技术论文--计算技术、计算机技术论文--计算机软件论文--程序设计、软件工程论文--程序设计论文

基于Hadoop的ETL部件在分布式数据挖掘引擎中的应用

摘要第4-5页
Abstract第5页
第一章 绪论第8-12页
    1.1 研究背景与意义第8-9页
    1.2 国内外研究现状第9-10页
        1.2.1 分布式数据发展现状(Hadoop)第9页
        1.2.2 ETL部件发展现状第9-10页
    1.3 论文主要研究内容第10-11页
    1.4 论文组织第11-12页
第二章 相关背景知识第12-21页
    2.1 分布式数据挖掘第12-14页
        2.1.1 分布式数据挖掘第12页
        2.1.2 分布式数据挖掘典型应用第12-14页
        2.1.3 分布式数据挖掘基础工具第14页
    2.2 分布式数据挖掘引擎系统核心支撑技术第14-18页
        2.2.1 数据仓库第14-17页
        2.2.2 数据分析第17页
        2.2.3 数据挖掘第17-18页
    2.3 Hadoop第18-20页
        2.3.1 Hadoop架构第18-20页
        2.3.2 Hadoop特点第20页
    2.4 分布式数据挖掘引擎系统中的ETL部件第20-21页
第三章 分布式数据挖掘引擎第21-36页
    3.1 分布式数据挖掘引擎第21-23页
        3.1.1 分布式数据挖掘引擎逻辑架构第21-23页
        3.1.2 分布式数据挖掘引擎物理架构第23页
    3.2 建造分布式数据挖掘引擎系统数据仓库第23-28页
        3.2.1 分布式数据挖掘引擎数据仓库结构第24-25页
        3.2.2 源数据分析第25-26页
        3.2.3 数据仓库模型设计第26页
        3.2.4 数据仓库的ETL第26-28页
    3.3 分布式数据挖掘实体管理器第28-32页
        3.3.1 实体的概念第28-29页
        3.3.2 实体分类第29页
        3.3.3 实体管理器第29-32页
    3.4 分布式数据挖掘引擎搜索模块第32-36页
        3.4.1 搜索系统简介第32页
        3.4.2 搜索系统设计与实现第32-34页
        3.4.3 索引的建立和使用第34-36页
第四章 结构化数据文件预处理第36-41页
    4.1 结构化数据文件中数据空缺值处理第36-37页
    4.2 结构化数据文件噪声处理方法第37-38页
    4.3 结构化数据集成与变换第38-39页
    4.4 数据规约第39-41页
第五章 多源结构化数据的ETL部件的设计与实现第41-52页
    5.1 多源结构化数据ETL部件整体架构第41-44页
        5.1.1 ETL整体架构第41-42页
        5.1.2 ETL应用原则第42-43页
        5.1.3 ETL策略第43-44页
    5.2 多源结构化数据的ETL主要处理第44-47页
        5.2.1 多源数据文件管理第44页
        5.2.2 多源数据文件上传第44-45页
        5.2.3 数据文件抽取和转换第45-47页
        5.2.4 数据入库第47页
    5.3 数据编码第47页
    5.4 数据接口第47-48页
        5.4.1 分布式数据挖掘引擎系统与外部数据源接口第47-48页
        5.4.2 分布式数据挖掘引擎系统与业务接口第48页
    5.5 ETL的流程与调度第48-50页
        5.5.1 ETL流程第49-50页
        5.5.2 ETL调度第50页
    5.6 ETL问题反馈与解决第50-52页
        5.6.1 ETL过程中的问题解决第50-51页
        5.6.2 定时核查与抽验第51-52页
第六章 总结与展望第52-54页
参考文献第54-57页
致谢第57页

论文共57页,点击 下载论文
上一篇:多核环境下中介边缘检测方法的并行化及编程实现
下一篇:短文本中特殊信息的识别及其在数据挖掘引擎中的应用