首页--工业技术论文--自动化技术、计算机技术论文--计算技术、计算机技术论文--计算机软件论文--程序设计、软件工程论文--程序设计论文

基于大数据平台的流连接算法及并行化研究

摘要第4-5页
abstract第5页
第一章 绪论第8-14页
    1.1 课题背景及意义第8-9页
    1.2 国内外研究现状第9-12页
        1.2.1 云计算与大数据背景介绍第9-10页
        1.2.2 国内外大数据处理框架研究现状第10-11页
        1.2.3 国内外流连接算法研究现状第11-12页
    1.3 论文的主要工作第12页
    1.4 论文结构第12-14页
第二章 相关背景知识介绍第14-27页
    2.1 大规模批处理系统第14-17页
        2.1.1 MapReduce计算架构第14-17页
        2.1.2 DAG计算模型第17页
    2.2 流式处理系统第17-24页
        2.2.1 流式计算系统架构第18-21页
        2.2.2 流处理状态持久化技术第21-24页
    2.3 其他相关技术第24-26页
        2.3.1 Kafka消息队列第24-26页
        2.3.2 内存数据库Redis第26页
    2.4 本章小结第26-27页
第三章 基于时间滑动窗口改进的流连接算法第27-37页
    3.1 基于滑动窗口的流连接算法及代价模型第28-31页
        3.1.1 相关概念描述第28-29页
        3.1.2 周期更新的滑动窗口的连接算法T-WJoin第29-31页
    3.2 基于时间滑动窗口改进的流连接算法AT-WJoin第31-34页
        3.2.1 滑动窗口设计第31-32页
        3.2.2 基于时间滑动窗口改进的流连接算法AT-WJoin第32-34页
    3.3 实验结果与分析第34-36页
    3.4 本章小结第36-37页
第四章 基于大数据平台的流连接并行化研究第37-44页
    4.1 流连接并行化分析第37-38页
    4.2 基于大数据平台的实时连接查询SP-Join框架第38-43页
        4.2.1 连接语义分割算法基本原理第39-40页
        4.2.2 基于一致性Hash改进的数据分发策略第40-43页
    4.3 本章小结第43-44页
第五章 基于Storm的流连接算法设计与实现第44-56页
    5.1 Storm集群环境搭建第44-49页
        5.1.1 搭建zookeeper集群第44-46页
        5.1.2 相关依赖安装第46-48页
        5.1.3 Storm安装第48-49页
    5.2 基于Storm的数据流连接算法AT-WJoin第49-52页
        5.2.1 数据流分发模块设计第49-51页
        5.2.2 数据流连接模块设计第51-52页
        5.2.3 数据流连接拓扑实现设计第52页
    5.3 实验结果对比分析第52-55页
        5.3.1 实验数据集第52-53页
        5.3.2 实验环境第53页
        5.3.3 实验结果分析第53-55页
    5.4 本章小结第55-56页
第六章 总结与展望第56-58页
    6.1 论文总结第56页
    6.2 下一步工作第56-58页
参考文献第58-61页
附录1 攻读硕士学位期间撰写论文第61-62页
附录2 攻读硕士学位期间申请的专利第62-63页
附录3 攻读硕士学位期间参加的科研项目第63-64页
致谢第64页

论文共64页,点击 下载论文
上一篇:V~2控制开关DC-DC变换器及其非线性动力学研究
下一篇:铁路集装箱中心站物流系统建模与优化研究