首页--天文学、地球科学论文--天文学论文--天文观测设备与观测资料论文

分布式天文海量数据处理与控制研究

摘要第5-7页
ABSTRACT第7-8页
第1章 绪论第16-26页
    1.1 研究背景第16-21页
        1.1.1 MUSER数据处理第17-20页
        1.1.2 NVST观测控制第20-21页
    1.2 研究意义及价值第21-22页
    1.3 论文研究范畴第22-23页
    1.4 论文主要研究工作第23-24页
    1.5 论文章节安排第24-26页
第2章 研究现状与趋势第26-42页
    2.1 高性能计算第26-27页
    2.2 并行计算第27-28页
    2.3 分布式计算第28-30页
    2.4 统一资源管理第30-32页
        2.4.1 YARN第30-31页
        2.4.2 Mesos第31-32页
    2.5 容器化应用第32-34页
        2.5.1 Docker第33页
        2.5.2 容器调度第33-34页
        2.5.3 CaaS第34页
    2.6 望远镜观测控制系统第34-35页
    2.7 相关理论基础第35-39页
        2.7.1 阿姆达尔定律第35-36页
        2.7.2 MapReduce第36-37页
        2.7.3 ZeroMQ第37-38页
        2.7.4 有向无环图第38页
        2.7.5 高可用性第38-39页
        2.7.6 资源隔离第39页
    2.8 本章小结第39-42页
第3章 SPARK在MUSER中的应用研究第42-52页
    3.1 实时处理PIPELINE第42-43页
    3.2 自定义RECEIVER第43-44页
    3.3 弹性分布式数据集第44-45页
    3.4 自定义分区方式第45-46页
    3.5 持久化选择第46页
    3.6 时间切片第46-47页
    3.7 共享变量第47页
    3.8 检查点第47-48页
    3.9 异步执行第48页
    3.10 实验第48-50页
    3.11 讨论第50-51页
    3.12 本章小结第51-52页
第4章 天文分布式计算框架研究第52-64页
    4.1 框架设计第52-54页
        4.1.1 计算模型第53页
        4.1.2 整体框架第53-54页
    4.2 关键技术第54-56页
        4.2.1 工厂单点故障第54-55页
        4.2.2 多类型工作节点第55页
        4.2.3 工人进程的数量第55页
        4.2.4 批量计算与流式计算第55-56页
        4.2.5 心跳检测第56页
        4.2.6 服务融合第56页
    4.3 编程接口第56-59页
    4.4 部署与监控第59页
    4.5 实验第59-61页
        4.5.1 环境第60页
        4.5.2 测试第60-61页
    4.6 讨论第61-62页
    4.7 本章小结第62-64页
第5章 OPENCLUSTER在MUSER中的应用研究第64-72页
    5.1 MUSER数据处理PIPELINE第64-66页
    5.2 历史观测数据处理第66-67页
    5.3 实时计算第67-68页
    5.4 界面操作第68-69页
    5.5 实验第69-70页
    5.6 讨论第70页
    5.7 本章小结第70-72页
第6章 OPENCLUSTER资源调度研究第72-80页
    6.1 概述第72-73页
    6.2 集群独立调度模式第73-74页
    6.3 基于MESOS的资源调度第74-77页
        6.3.1 Scheduler设计第74-75页
        6.3.2 Executor设计第75-76页
        6.3.3 单任务单框架资源调度第76页
        6.3.4 集中仓储式资源调度第76-77页
    6.4 本章小结第77-80页
第7章 轻量级天文私有云应用第80-90页
    7.1 引言第80页
    7.2 天文计算容器化第80-82页
        7.2.1 OpenCluster的容器支持第81页
        7.2.2 开发环境的容器编排第81-82页
        7.2.3 镜像制作第82页
    7.3 MESOS中的容器调度第82-85页
        7.3.1 Marathon第83-84页
        7.3.2 服务发现第84-85页
    7.4 KUBERNETES容器管理第85-88页
        7.4.1 网络配置第85页
        7.4.2 服务发现第85-87页
        7.4.3 应用部署第87-88页
    7.5 讨论第88页
    7.6 本章小结第88-90页
第8章 基于ZEROMQ的观测控制系统通信技术第90-102页
    8.1 RTS2的网络通信第90-93页
        8.1.1 体系结构第90-91页
        8.1.2 网络协议第91-93页
        8.1.3 存在的问题第93页
    8.2 基于MQTT通信分析第93-96页
        8.2.1 MQTT通信协议第94页
        8.2.2 基于MQTT的设计第94-96页
        8.2.3 存在的问题第96页
    8.3 基于ZEROMQ的设计第96-99页
        8.3.1 系统结构第96-97页
        8.3.2 套接字设计第97-99页
        8.3.3 心跳机制第99页
        8.3.4 驱动转接第99页
        8.3.5 序列化第99页
    8.4 本章小结第99-102页
第9章 总结与展望第102-106页
    9.1 分布式计算第102-103页
    9.2 望远镜观测控制系统第103页
    9.3 展望第103-106页
参考文献第106-114页
致谢第114-116页
作者简介第116页

论文共116页,点击 下载论文
上一篇:企业内部组织创建中的关系建构与资源流动--基于微观民族志方法的探索性研究
下一篇:沈阳市民办教育发展对策研究