基于Hadoop的虚拟筛选海量数据存储及结果处理的设计和实现
中文摘要 | 第1-4页 |
Abstract | 第4-8页 |
第一章 绪论 | 第8-14页 |
·研究背景 | 第8-11页 |
·Hadoop的国内外研究现状与发展趋势 | 第11-12页 |
·本文的主要工作 | 第12-13页 |
·本文的组织结构 | 第13-14页 |
第二章 相关技术概述 | 第14-31页 |
·Hadoop简介 | 第14-17页 |
·Hadoop发展史 | 第14-15页 |
·Hadoop框架模型 | 第15-17页 |
·Hadoop应用举例 | 第17页 |
·Hadoop关键技术简介 | 第17-29页 |
·Hadoop分布式文件系统(HDFS) | 第18-23页 |
·MapReduce | 第23-27页 |
·HBase | 第27-29页 |
·机架技术介绍 | 第29-31页 |
第三章 总体架构和关键问题提出 | 第31-34页 |
·总体架构 | 第31-32页 |
·关键问题 | 第32-34页 |
·虚拟筛选数据存储 | 第32-33页 |
·作业调度 | 第33页 |
·作业执行 | 第33页 |
·结果数据处理 | 第33-34页 |
第四章 海量数据存储的设计和实现 | 第34-44页 |
·Hadoop数据安全存储 | 第35-39页 |
·Hadoop多机架存储设计 | 第35-36页 |
·机架存储技术实现 | 第36-39页 |
·小分子数据分块存储 | 第39-41页 |
·小分子完整性研究 | 第39-40页 |
·小分子完整性实现 | 第40页 |
·数据块大小研究 | 第40-41页 |
·小分子数据分组策略的设计和实现 | 第41-43页 |
·根据对接时间将mol2文件分组的设计 | 第41-42页 |
·模N算法实现mol2文件分组 | 第42-43页 |
·小结 | 第43-44页 |
第五章 作业管理及结果数据处理 | 第44-56页 |
·作业调度算法的研究和实现 | 第44-48页 |
·算法介绍及比较 | 第44-47页 |
·算法实现 | 第47-48页 |
·Map函数实现并行对接 | 第48-50页 |
·结果数据处理的设计和实现 | 第50-55页 |
·数据处理的设计 | 第50-52页 |
·MapReduce实现数据处理 | 第52-55页 |
·MapReduce程序主函数配置 | 第55页 |
·小结 | 第55-56页 |
第六章 平台搭建及测试 | 第56-62页 |
·Hadoop平台的搭建 | 第56-59页 |
·平台测试 | 第59-61页 |
·小节 | 第61-62页 |
第七章 总结与展望 | 第62-64页 |
·工作总结 | 第62-63页 |
·未来的展望 | 第63-64页 |
研究生期间参与的项目 | 第64-65页 |
致谢 | 第65-66页 |
参考文献 | 第66-68页 |