| 摘要 | 第1-4页 |
| Abstract | 第4-11页 |
| 第1章 绪论 | 第11-15页 |
| ·课题背景 | 第11-12页 |
| ·课题目标 | 第12页 |
| ·本文创新点 | 第12-13页 |
| ·本文组织结构 | 第13-14页 |
| ·本章小结 | 第14-15页 |
| 第2章 研究现状和相关技术 | 第15-25页 |
| ·日志系统的研究现状 | 第15-22页 |
| ·Scribe(Facebook) | 第15-16页 |
| ·Chukwa(Apache) | 第16-18页 |
| ·Flume(Cloudera) | 第18-19页 |
| ·Kafka(LinkedIn) | 第19-21页 |
| ·日志系统总结 | 第21-22页 |
| ·相关技术 | 第22-24页 |
| ·Zookeeper | 第22页 |
| ·Hyperic HQ | 第22-24页 |
| ·本章小结 | 第24-25页 |
| 第3章 数据云服务平台的总体设计 | 第25-33页 |
| ·总体需求 | 第25-26页 |
| ·平台总体架构 | 第26-30页 |
| ·分布式日志系统 | 第28-29页 |
| ·数据分析系统 | 第29页 |
| ·数据监控管理系统 | 第29-30页 |
| ·平台使用流程 | 第30-32页 |
| ·数据收集流程 | 第30-31页 |
| ·数据分析流程 | 第31-32页 |
| ·本章小结 | 第32-33页 |
| 第4章 基于消息机制的分布式日志系统设计与实现 | 第33-59页 |
| ·需求分析 | 第33-34页 |
| ·系统架构设计 | 第34-37页 |
| ·消息通信协议设计 | 第37-39页 |
| ·消息通信协议格式 | 第37-39页 |
| ·通信模块设计与实现 | 第39-44页 |
| ·数据存取模块设计与实现 | 第44-48页 |
| ·数据存储 | 第44-47页 |
| ·数据读取 | 第47-48页 |
| ·数据推送模块设计与实现 | 第48-50页 |
| ·数据消费模块设计与实现 | 第50-51页 |
| ·系统分布式特性设计与实现 | 第51-55页 |
| ·日志服务端(Broker)分布式实现简介 | 第52-53页 |
| ·日志消费者(Consumer)分布式实现简介 | 第53-55页 |
| ·性能测试及实验结果 | 第55-58页 |
| ·测试环境 | 第55页 |
| ·日志系统生产者(producer)发送日志数据的性能测试 | 第55-56页 |
| ·日志消费者(consumer)消费日志数据的性能测试 | 第56-58页 |
| ·本章小结 | 第58-59页 |
| 第5章 数据分析系统设计与实现 | 第59-71页 |
| ·数据分析系统总体设计 | 第59-60页 |
| ·数据分析系统运行流程 | 第60-62页 |
| ·数据分析系统的四个模块 | 第62-69页 |
| ·数据开放接口模块 | 第63-64页 |
| ·数据定制模块 | 第64-66页 |
| ·计算模块 | 第66-68页 |
| ·任务管理模块 | 第68-69页 |
| ·数据分析系统的应用 | 第69-70页 |
| ·数据分析用户 | 第69页 |
| ·内部数据用户 | 第69-70页 |
| ·数据产品 | 第70页 |
| ·本章小结 | 第70-71页 |
| 第6章 数据监控管理系统 | 第71-79页 |
| ·数据监控管理系统总体设计 | 第71-72页 |
| ·数据监控管理系统运行流程 | 第72-73页 |
| ·数据监控管理系统的两个模块 | 第73-78页 |
| ·监控告警模块 | 第73-75页 |
| ·数据可视化模块 | 第75-78页 |
| ·本章小结 | 第78-79页 |
| 第7章 数据云服务平台在遥感数据领域的应用展望 | 第79-85页 |
| ·遥感数据简介 | 第79-80页 |
| ·遥感数据云服务平台使用架构 | 第80-82页 |
| ·遥感数据产品展望 | 第82-84页 |
| ·本章小结 | 第84-85页 |
| 第8章 总结与展望 | 第85-87页 |
| ·工作总结 | 第85页 |
| ·下一步工作 | 第85-87页 |
| 参考文献 | 第87-89页 |
| 攻读硕士学位期间主要的研究成果 | 第89-90页 |
| 致谢 | 第90页 |