摘要 | 第4-5页 |
Abstract | 第5-6页 |
第一章 绪论 | 第12-18页 |
1.1 研究背景 | 第12页 |
1.2 国内外研究现状 | 第12-14页 |
1.3 本文研究意义 | 第14-15页 |
1.4 本文研究的主要内容和章节安排 | 第15-18页 |
第二章 关键技术与系统总体设计 | 第18-28页 |
2.1 Hadoop大数据平台 | 第18-23页 |
2.1.1 Hadoop的简介 | 第18-19页 |
2.1.2 Hadoop的组件结构介绍 | 第19-20页 |
2.1.3 分布式文件系统HDFS | 第20-22页 |
2.1.4 并行计算模型MapReduce | 第22-23页 |
2.2 系统总体设计 | 第23-27页 |
2.2.1 分层结构设计 | 第23-25页 |
2.2.2 系统功能架构 | 第25-27页 |
2.3 本章小结 | 第27-28页 |
第三章 数据持久层设计 | 第28-58页 |
3.1 海洋科学数据与格式 | 第28-31页 |
3.1.1 Argo海洋数据 | 第28-30页 |
3.1.2 NetCDF数据格式 | 第30-31页 |
3.2 海洋观测数据文件处理 | 第31-35页 |
3.2.1 Argo数据批处理 | 第32-34页 |
3.2.2 数据实时更新 | 第34-35页 |
3.3 数据库的选择 | 第35-37页 |
3.3.1 HBase分布式数据库 | 第35-36页 |
3.3.2 MapReduce与HBase的协同操作 | 第36-37页 |
3.4 数据库表设计 | 第37-50页 |
3.4.1 浮标相关表设计 | 第37-41页 |
3.4.2 预查询表与剖面表 | 第41-50页 |
3.5 数据层性能测试 | 第50-55页 |
3.6 本章小结 | 第55-58页 |
第四章 平台服务层插值应用 | 第58-72页 |
4.1 反距离加权插值 | 第58-59页 |
4.2 最近邻搜索KD树 | 第59-62页 |
4.3 Hadoop插值实现 | 第62-64页 |
4.4 实验测试 | 第64-69页 |
4.5 本章小结 | 第69-72页 |
第五章 基础支持层高可靠设计 | 第72-90页 |
5.1 分布式一致性算法 | 第72-77页 |
5.1.1 命名节点高可靠功能要求 | 第72-74页 |
5.1.2 ZAB协议 | 第74-76页 |
5.1.3 高可靠性设计 | 第76-77页 |
5.2 系统部署 | 第77-82页 |
5.2.1 系统部署架构 | 第77-78页 |
5.2.2 集群软、硬件配置 | 第78-79页 |
5.2.3 软件安装与参数配置 | 第79-82页 |
5.3 系统高可靠性测试 | 第82-86页 |
5.3.1 DataNode节点故障处理测试 | 第82-84页 |
5.3.2 NameNode节点稳定性测试 | 第84-86页 |
5.4 部分WEB应用展示 | 第86-89页 |
5.5 本章小结 | 第89-90页 |
第六章 总结与展望 | 第90-92页 |
6.1 本文工作总结 | 第90-91页 |
6.2 未来工作展望 | 第91-92页 |
参考文献 | 第92-98页 |
致谢 | 第98-100页 |
硕士在读期间科研成果介绍 | 第100页 |