面向大数据挖掘的多任务跨平台可视化作业工具研究
摘要 | 第4-5页 |
abstract | 第5-6页 |
第1章 绪论 | 第9-19页 |
1.1 课题来源 | 第9页 |
1.2 研究背景与意义 | 第9-11页 |
1.3 国内外研究现状 | 第11-17页 |
1.4 论文工作与结构 | 第17-19页 |
第2章 作业工具总体设计 | 第19-31页 |
2.1 总体设计目标与功能需求分析 | 第19-22页 |
2.1.1 总体设计目标 | 第19-21页 |
2.1.2 功能需求分析 | 第21-22页 |
2.2 整体架构及业务流程设计 | 第22-26页 |
2.2.1 整体架构设计 | 第22-24页 |
2.2.2 业务流程设计 | 第24-26页 |
2.3 要解决的关键问题 | 第26-28页 |
2.3.1 实现可视化前端操作界面 | 第27页 |
2.3.2 对任务调度与资源利用率的优化 | 第27-28页 |
2.3.3 对任务处理效率的优化 | 第28页 |
2.4 采用的关键技术与工具 | 第28-30页 |
2.5 本章小结 | 第30-31页 |
第3章 可视化前端操作界面的研究与实现 | 第31-45页 |
3.1 解决方案概述 | 第31-32页 |
3.2 可视化前端操作界面的研究与设计 | 第32-34页 |
3.3 可视化前端操作界面的实现 | 第34-39页 |
3.3.1 工作流操作台模块 | 第34-36页 |
3.3.2 通信模块 | 第36-38页 |
3.3.3 节点库模块 | 第38-39页 |
3.3.4 命令行调试模块 | 第39页 |
3.3.5 可视化组件模块 | 第39页 |
3.4 实现效果测试 | 第39-44页 |
3.4.1 基本功能 | 第40-42页 |
3.4.2 可视化管理辅助功能 | 第42-43页 |
3.4.3 远程命令行辅助功能 | 第43页 |
3.4.4 测试结论 | 第43-44页 |
3.5 本章小结 | 第44-45页 |
第4章 任务拆分提交调度方案的研究与实现 | 第45-60页 |
4.1 任务拆分提交调度方案概述 | 第45-46页 |
4.2 任务拆分提交调度方案的研究与设计 | 第46-48页 |
4.3 任务拆分提交调度方案的实现 | 第48-52页 |
4.3.1 集群资源调度 | 第48-50页 |
4.3.2 任务拆分提交 | 第50-52页 |
4.4 方案测试分析 | 第52-59页 |
4.4.1 测试环境与测试方案设计 | 第52-53页 |
4.4.2 任务调度测试 | 第53-56页 |
4.4.3 资源闲置优化测试 | 第56-59页 |
4.4.4 测试结论 | 第59页 |
4.5 本章小结 | 第59-60页 |
第5章 任务去重及弹性资源配置方案的研究与实现 | 第60-73页 |
5.1 任务去重及弹性资源配置方案概述 | 第60-61页 |
5.2 任务去重及弹性资源配置方案的研究与设计 | 第61-63页 |
5.3 任务去重及弹性资源配置方案的实现 | 第63-66页 |
5.3.1 任务去重 | 第63-65页 |
5.3.2 弹性资源配置 | 第65-66页 |
5.4 方案测试分析 | 第66-72页 |
5.4.1 测试环境与测试方案设计 | 第66-67页 |
5.4.2 任务去重测试 | 第67-70页 |
5.4.3 弹性资源配置测试 | 第70-71页 |
5.4.4 测试结论 | 第71-72页 |
5.5 本章小结 | 第72-73页 |
第6章 总结与展望 | 第73-75页 |
6.1 论文总结 | 第73-74页 |
6.2 论文展望 | 第74-75页 |
致谢 | 第75-76页 |
参考文献 | 第76-80页 |