首页--工业技术论文--自动化技术、计算机技术论文--计算技术、计算机技术论文--计算机软件论文--程序设计、软件工程论文--程序设计论文

面向警务数据处理的Spark性能优化研究与实现

摘要第5-6页
abstract第6-7页
第一章 绪论第10-18页
    1.1 研究背景和意义第10-12页
    1.2 国内外研究现状第12-15页
        1.2.1 性能预测第12-13页
        1.2.2 推测执行算法第13-15页
        1.2.3 数据缓存策略第15页
    1.3 研究目标和研究内容第15-16页
    1.4 论文结构第16-18页
第二章 相关理论与技术第18-28页
    2.1 Spark介绍第18-23页
        2.1.1 总体架构第18-19页
        2.1.2 弹性分布式数据集第19-20页
        2.1.3 作业提交与调度执行第20-22页
        2.1.4 SparkSQL第22-23页
    2.2 HDFS简述第23-24页
    2.3 人工神经网络第24-25页
    2.4 粒子群优化算法第25-27页
    2.5 本章小结第27-28页
第三章 基于RBF神经网络的任务执行时间预测第28-47页
    3.1 基于RBF神经网络的预测模型第28-31页
        3.1.1 任务执行时间影响因素第28-30页
        3.1.2 神经网络模型结构第30-31页
    3.2 RBF神经网络的训练方法改进第31-41页
        3.2.1 训练方法分析第31-33页
        3.2.2 基本训练算法GD第33-34页
        3.2.3 基于PSO的全局寻优算法CPSOC第34-39页
        3.2.4 GD-CPSOC-GD训练过程第39-41页
    3.3 实验与结果分析第41-46页
        3.3.1 实验环境第41-42页
        3.3.2 数据集说明第42页
        3.3.3 实验结果第42-46页
    3.4 本章小结第46-47页
第四章 基于任务执行时间预测的性能优化第47-69页
    4.1 任务调度优化第47-58页
        4.1.1 延迟调度算法优化第49-53页
        4.1.2 推测执行算法改进第53-58页
    4.2 自适应缓存策略第58-63页
        4.2.1 问题分析第58-60页
        4.2.2 并集下推优化第60-61页
        4.2.3 执行计划代价模型第61-62页
        4.2.4 算法流程第62-63页
    4.3 实验与性能分析第63-68页
        4.3.1 优化的延迟调度算法实验第64-65页
        4.3.2 改进的推测执行算法实验第65-66页
        4.3.3 自适应缓存策略实验第66-68页
    4.4 本章小结第68-69页
第五章 基于Spark的警务数据处理平台的设计与实现第69-81页
    5.1 系统简介第69-70页
        5.1.1 实现目标第69-70页
        5.1.2 开发环境第70页
    5.2 系统整体架构第70-71页
    5.3 系统模块实现第71-77页
        5.3.1 展示层模块第71-73页
        5.3.2 业务调度层模块第73-76页
        5.3.3 数据管理层模块第76-77页
    5.4 系统功能展示第77-80页
    5.5 本章小结第80-81页
第六章 总结与展望第81-83页
    6.1 总结第81-82页
    6.2 展望第82-83页
致谢第83-84页
参考文献第84-88页
攻读硕士学位期间取得的成果第88页

论文共88页,点击 下载论文
上一篇:基于红外热成像的复合材料无损检测研究
下一篇:基于多源大数据分析的图像检索技术研究