首页--工业技术论文--自动化技术、计算机技术论文--计算技术、计算机技术论文--计算机软件论文--程序设计、软件工程论文--程序设计论文

支持大规模流数据在线处理动态数据分区算法研究

摘要第4-6页
Abstract第6-7页
第1章 绪论第10-15页
    1.1 相关技术现状第10-11页
        1.1.1 流数据特点第10-11页
    1.2 课题研究背景和意义第11-12页
    1.3 本文工作第12-13页
    1.4 本文结构第13-15页
第2章 相关工作第15-19页
    2.1 静态大数据处理技术第15-16页
    2.2 大规模流数据处理技术第16页
    2.3 动态分区与自动扩展技术第16-18页
    2.4 本章小结第18-19页
第3章 流数据在线处理系统 SPATE第19-25页
    3.1 灵活的流数据处理模型第19-21页
    3.2 虚拟交换节点第21-22页
        3.2.1 VSN 模型第21-22页
        3.2.2 VSN 映射关系表第22页
    3.3 数据分发流程第22-24页
    3.4 本章小结第24-25页
第4章 动态在线数据分区策略与算法第25-43页
    4.1 问题描述第25-28页
        4.1.1 无状态/有状态操作第25-26页
        4.1.2 问题建模第26-28页
    4.2 约束条件第28-30页
        4.2.1 实时性约束第28-30页
        4.2.2 迁移代价约束第30页
    4.3 算法设计第30-39页
        4.3.1 算法思想第30-31页
        4.3.2 基础分区算法第31-32页
        4.3.3 实时控制算法第32-33页
        4.3.4 一致性哈希与 FFD 结合的优化算法 CFFDM第33-35页
        4.3.5 迁移对象选择算法第35-36页
        4.3.6 迁移位置选择算法第36-39页
    4.4 迁移协议第39-42页
        4.4.1 状态定义与编程模型第39-40页
        4.4.2 两阶段状态迁移协议第40-42页
    4.5 本章小结第42-43页
第5章 实验和数据分析第43-53页
    5.1 引言第43页
    5.2 系统原型实现第43-45页
        5.2.1 数据传输机制第43-44页
        5.2.2 在线 MapReduce 分区流程第44-45页
    5.3 CFFDM 算法测试结果与分析第45-52页
        5.3.1 实验环境第45-46页
        5.3.2 不同物品数量下对箱子数的影响第46-48页
        5.3.3 不同物品数量下对迁移成本的影响第48-50页
        5.3.4 不同物品内存占有量增大比率对突发性的影响第50-51页
        5.3.5 节点数量随流速变化第51-52页
    5.4 本章小结第52-53页
第6章 总结与展望第53-54页
参考文献第54-58页
作者简介及在学期间取得的科研成果第58-59页
致谢第59页

论文共59页,点击 下载论文
上一篇:渤海半潜和沉底油漂移预测模型及风险评估
下一篇:宁波海域船舶污染应急能力评价