摘要 | 第5-6页 |
ABSTRACT | 第6-7页 |
缩略词表 | 第11-12页 |
第一章 绪论 | 第12-18页 |
1.1 研究工作的背景与意义 | 第12-13页 |
1.2 国内外研究历史与现状 | 第13-15页 |
1.2.1 空间环境数据可视化 | 第13-14页 |
1.2.2 分布式并行计算 | 第14-15页 |
1.2.3 HDFS小文件问题 | 第15页 |
1.3 研究内容及意义 | 第15-16页 |
1.3.1 研究内容 | 第15-16页 |
1.3.2 研究意义 | 第16页 |
1.4 本论文的结构安排 | 第16-18页 |
第二章 海量空间环境数据分析及并行技术研究 | 第18-34页 |
2.1 空间环境数据形式和特点 | 第18-24页 |
2.1.1 空间环境数据形式 | 第18-20页 |
2.1.2 空间环境数据特点 | 第20-24页 |
2.2 空间环境数据应用 | 第24-26页 |
2.2.1 数据可视化 | 第25页 |
2.2.2 数据普通检索 | 第25页 |
2.2.3 数据事件检索 | 第25页 |
2.2.4 其他应用 | 第25-26页 |
2.3 分布式并行处理技术 | 第26-33页 |
2.3.1 空间环境数据分布式并行处理必要性分析 | 第26-28页 |
2.3.2 空间环境数据分布式并行处理可行性分析 | 第28-30页 |
2.3.3 分布式并行机理分析 | 第30-32页 |
2.3.4 空间环境数据分布式并行处理关键技术 | 第32-33页 |
2.4 本章小结 | 第33-34页 |
第三章 空间环境数据分布式存储研究 | 第34-54页 |
3.1 引言 | 第34页 |
3.2 存储和访问效率评价标准 | 第34-35页 |
3.3 空间环境数据文件HDFS优化研究 | 第35-50页 |
3.3.1 空间环境数据小文件问题 | 第35-40页 |
3.3.2 空间环境数据小文件优化方法 | 第40-42页 |
3.3.3 空间环境数据小文件HDFS优化 | 第42-50页 |
3.4 空间环境数据文件管理模型 | 第50-53页 |
3.4.1 拓扑结构 | 第50-51页 |
3.4.2 软件架构 | 第51-52页 |
3.4.3 文件组织 | 第52-53页 |
3.5 本章小结 | 第53-54页 |
第四章 空间环境数据并行计算研究 | 第54-74页 |
4.1 引言 | 第54-55页 |
4.2 空间环境数据预处理模型 | 第55-61页 |
4.2.1 空间环境数据预处理 | 第55-58页 |
4.2.2 数据预处理模型设计 | 第58-60页 |
4.2.3 数据预处理模型实现 | 第60-61页 |
4.3 空间环境数据分析并行化 | 第61-65页 |
4.3.1 任务算法并行化流程 | 第62-63页 |
4.3.2 任务并行化推送MFL-TP算法 | 第63-65页 |
4.4 高能电子增强事件数据并行处理研究 | 第65-73页 |
4.4.1 高能电子增强事件数据分析任务 | 第66页 |
4.4.2 高能电子增强事件Kmeans聚类算法分析 | 第66-70页 |
4.4.3 高能电子增强事件Kmeans聚类算法并行化 | 第70-73页 |
4.4.4 高能电子增强事件Kmeans聚类任务并行化 | 第73页 |
4.5 本章小结 | 第73-74页 |
第五章 实验及验证 | 第74-92页 |
5.1 空间环境分布式实验平台搭建 | 第74-77页 |
5.1.1 实验环境 | 第74-75页 |
5.1.2 实验数据准备 | 第75-76页 |
5.1.3 分布式集群实验平台搭建 | 第76-77页 |
5.2 空间环境数据分布式存储优化实验及验证 | 第77-83页 |
5.2.1 合并文件优化FNPKN验证 | 第78-80页 |
5.2.2 缓存连接优化MSPF验证 | 第80-82页 |
5.2.3 DTBF算法优化MSPF验证 | 第82-83页 |
5.3 空间环境数据并行计算实验及验证 | 第83-89页 |
5.3.1 单机和并行化Kmeans聚类算法对比实验 | 第84页 |
5.3.2 高能电子增强事件并行化Kmeans聚类结果分析 | 第84-86页 |
5.3.3 MFL-TP算法验证 | 第86-88页 |
5.3.4 集群规模加速实验 | 第88-89页 |
5.4 空间环境数据分布式文件管理器 | 第89-91页 |
5.5 本章小结 | 第91-92页 |
第六章 全文总结与展望 | 第92-94页 |
6.1 本文总结 | 第92-93页 |
6.2 未来展望 | 第93-94页 |
致谢 | 第94-95页 |
参考文献 | 第95-97页 |