首页--工业技术论文--自动化技术、计算机技术论文--计算技术、计算机技术论文--计算机软件论文--程序设计、软件工程论文--程序设计论文

基于Sqoop的数据转换平台设计与实现

摘要第4-5页
Abstract第5-6页
第一章 绪论第9-13页
    1.1 研究背景第9-10页
        1.1.1 课题来源第9页
        1.1.2 数据转换平台的价值与意义第9-10页
    1.2 国内外研究现状第10-11页
    1.3 研究内容及创新点第11-12页
    1.4 论文主要结构第12-13页
第二章 相关技术第13-24页
    2.1 Hadoop第13-14页
    2.2 HDFS第14-16页
    2.3 MapReduce第16-18页
    2.4 Hive第18-19页
    2.5 HBase第19-21页
    2.6 Sqoop第21-23页
    2.7 本章小结第23-24页
第三章 数据转换平台的需求分析第24-29页
    3.1 应用定位第24-25页
    3.2 功能需求第25-27页
        3.2.1 整体功能需求第25页
        3.2.2 具体功能需求第25-27页
    3.3 非功能需求第27-28页
    3.4 本章小结第28-29页
第四章 数据转换平台的设计第29-41页
    4.1 总体架构第29页
    4.2 关系数据库与Hadoop数据转换第29-30页
        由HBase向关系型数据库的数据导出第30页
    4.3 XML与Hadoop数据转换第30-35页
        4.3.1 XML与HDFS转换第31-32页
        4.3.2 XML与Hive转换第32-33页
        4.3.3 XML与HBase转换第33-35页
    4.4 CSV与Hadoop数据转换第35-38页
        4.4.1 CSV与HDFS转换第35页
        4.4.2 CSV与Hive转换第35-37页
        4.4.3 CSV与HBase转换第37-38页
    4.5 动态扩展数据转换第38-40页
    4.6 本章小结第40-41页
第五章 数据转换平台的实现第41-67页
    5.1 平台总体实现方案第41-44页
    5.2 关系型数据库与Hadoop转换功能实现第44-47页
        HBase向关系型数据库导出第44-47页
    5.3 XML与Hadoop转换功能实现第47-56页
        5.3.1 XML与HDFS转换功能第47-50页
        5.3.2 XML与Hive转换第50-53页
        5.3.3 XML与HBase转换第53-56页
    5.4 CSV与Hadoop转换功能实现第56-63页
        5.4.1 CSV与HDFS转换第56-57页
        5.4.2 CSV与Hive转换第57-59页
        5.4.3 CSV与HBase转换第59-63页
    5.5 动态扩展功能实现第63-66页
        5.5.1 关系型数据库与Hadoop转换的扩展第63-64页
        5.5.2 其他类型的数据与Hadoop转换的扩展第64-66页
    5.6 本章小结第66-67页
第六章 数据转换平台的测试第67-75页
    6.1 测试概述第67页
    6.2 测试环境第67-68页
    6.3 测试内容第68-74页
        6.3.1 功能测试第68-73页
        6.3.2 性能测试第73-74页
    6.4 本章小结第74-75页
第七章 总结与展望第75-77页
    7.1 工作总结第75-76页
    7.2 工作展望第76-77页
参考文献第77-81页
攻读学位期间参加的科研项目第81-82页
致谢第82页

论文共82页,点击 下载论文
上一篇:基于XDraw的并行可视域分析算法设计与实现
下一篇:基于无证书线性同态签名的云存储完整性验证系统的设计与实现