基于MongoDB与Hadoop的地学遥感大数据管理系统的设计
摘要 | 第1-4页 |
abstract | 第4-9页 |
第一章 绪论 | 第9-17页 |
·遥感数据管理系统现状 | 第9-15页 |
·项目目标及预期效果 | 第15-16页 |
·项目研究内容 | 第16-17页 |
第二章 相关理论与技术 | 第17-20页 |
·MONGODB概述 | 第17-18页 |
·HADOOP概述 | 第18-20页 |
第三章 系统的总体设计 | 第20-29页 |
·总体需求及设计原则 | 第20-21页 |
·总体需求 | 第20页 |
·系统的设计原则 | 第20-21页 |
·系统的业务逻辑 | 第21-22页 |
·系统的体系结构 | 第22-23页 |
·系统的功能模块 | 第23-24页 |
·系统的数据结构设计 | 第24-27页 |
·概述 | 第24-25页 |
·用户个人信息数据结构设计 | 第25页 |
·用户状态数据结构设计 | 第25页 |
·用户作业数据结构设计 | 第25-26页 |
·系统信息数据结构设计 | 第26页 |
·日志数据结构设计 | 第26页 |
·遥感元数据数据结构设计 | 第26-27页 |
·系统的安全策略 | 第27-28页 |
·系统的环境及要求 | 第28-29页 |
第四章 数据采集子系统的设计 | 第29-37页 |
·概述 | 第29-30页 |
·数据采集子系统中关键功能模块的设计 | 第30-37页 |
·图像入库 | 第30-31页 |
·遥感产品入库 | 第31-33页 |
·CSV数据入库 | 第33-34页 |
·用户自定义数据入库 | 第34-35页 |
·查询结果导入计算节点 | 第35-37页 |
第五章 数据查询子系统的设计与实现 | 第37-43页 |
·概述 | 第37页 |
·数据查询子系统中关键功能模块的设计与实现 | 第37-43页 |
·简单查询 | 第37-38页 |
·复杂查询 | 第38-41页 |
·空间查询 | 第41-42页 |
·地图查询 | 第42-43页 |
第六章 数据导出子系统的设计 | 第43-51页 |
·概述 | 第43-44页 |
·数据导出子系统中关键功能模块的设计 | 第44-51页 |
·图表展示 | 第44-45页 |
·地图展示 | 第45-47页 |
·动态展示 | 第47-48页 |
·数据下载 | 第48-51页 |
第七章 数据计算服务子系统的设计 | 第51-61页 |
·概述 | 第51-52页 |
·数据计算服务子系统中关键功能模块的设计与实现 | 第52-61页 |
·数据去重 | 第52-53页 |
·坐标变换 | 第53-55页 |
·地图融合 | 第55-57页 |
·像素统计 | 第57-59页 |
·图像识别 | 第59-61页 |
第八章 用户管理子系统的设计 | 第61-69页 |
·概述 | 第61-62页 |
·用户管理子系统中关键功能模块的设计 | 第62-69页 |
·用户基本管理 | 第62-64页 |
·用户权限管理 | 第64-65页 |
·用户作业管理 | 第65-67页 |
·用户行为分析 | 第67-69页 |
第九章 节点维护子系统的设计 | 第69-78页 |
·概述 | 第69-70页 |
·节点维护子系统中关键功能模块的设计 | 第70-78页 |
·节点运行监控 | 第70-71页 |
·节点动态拓扑 | 第71-72页 |
·节点配置设置 | 第72-74页 |
·数据分片设置 | 第74-75页 |
·节点任务分配 | 第75-78页 |
第十章 日志管理子系统的设计 | 第78-85页 |
·概述 | 第78-79页 |
·日志管理子系统中关键功能模块的设计 | 第79-85页 |
·节点日志收集 | 第79-80页 |
·日志并行分析 | 第80-82页 |
·日志备份 | 第82-83页 |
·分析结果可视化 | 第83-85页 |
第十一章 系统的分布式架构部署 | 第85-90页 |
·概述 | 第85页 |
·MONGODB分布式架构的部署 | 第85-87页 |
·HADOOP分布式架构的部署 | 第87-89页 |
·MONGODB与HADOOP分布式架构统一管理 | 第89-90页 |
第十二章 系统性能及部分应用测试 | 第90-98页 |
·概述 | 第90页 |
·系统分布式存储架构稳定性测试 | 第90-91页 |
·系统分布式存储架构安全性测试 | 第91-92页 |
·数据清洗及数据导入性能测试 | 第92-97页 |
·数据检索性能测试 | 第97-98页 |
第十三章 总结及下一步工作 | 第98-100页 |
·工作总结 | 第98页 |
·下一步主要工作 | 第98-100页 |
参考文献 | 第100-102页 |
攻读硕士期间参加的主要科研项目 | 第102-103页 |
致谢 | 第103-104页 |
附录1 L45TM数据产品元数据清洗及导入代码 | 第104-106页 |
附录2 L45TM数据产品内文件解压及导入代码 | 第106-108页 |
附录3 波段文件名中元数据的提取代码 | 第108-109页 |