基于Hadoop的海量小型XML数据文件处理技术的设计和实现
| 摘要 | 第1-4页 |
| Abstract | 第4-7页 |
| 第一章 绪论 | 第7-13页 |
| ·选题背景及意义 | 第7-9页 |
| ·国内外现状分析 | 第9-10页 |
| ·论文工作内容 | 第10页 |
| ·论文组织结构 | 第10-13页 |
| 第二章 相关技术概述 | 第13-21页 |
| ·Hadoop 分布式系统 | 第13-17页 |
| ·Hadoop 计算模型-MapReduce | 第14-15页 |
| ·Hadoop 数据管理-HDFS | 第15-17页 |
| ·XML 解析技术 | 第17-20页 |
| ·XML 解析技术-DOM | 第17-19页 |
| ·XML 解析技术-SAX | 第19-20页 |
| ·本章小结 | 第20-21页 |
| 第三章 需求分析与解决方案论述 | 第21-31页 |
| ·系统开发背景 | 第21页 |
| ·系统需求分析 | 第21-28页 |
| ·Hadoop 容错机制分析 | 第22-24页 |
| ·Hadoop 作业调度机制分析 | 第24-25页 |
| ·Hadoop 现存问题分析 | 第25-28页 |
| ·解决方案论述 | 第28-29页 |
| ·海量小文件处理选取 | 第28-29页 |
| ·XML 解析技术选取 | 第29页 |
| ·本章小结 | 第29-31页 |
| 第四章 系统设计与实现 | 第31-47页 |
| ·系统应用架构 | 第31-32页 |
| ·数据库选型与设计 | 第32-36页 |
| ·数据库选型 | 第33-34页 |
| ·数据模型设计 | 第34-36页 |
| ·系统功能模块设计 | 第36-45页 |
| ·文件索引处理器 | 第37-39页 |
| ·海量 XML 解析器 | 第39-40页 |
| ·中间数据合并器 | 第40-41页 |
| ·中间数据存储器 | 第41-43页 |
| ·分布式数据处理器 | 第43-45页 |
| ·本章小结 | 第45-47页 |
| 第五章 应用效果与分析 | 第47-61页 |
| ·系统运行环境 | 第47-49页 |
| ·系统环境配置 | 第49-56页 |
| ·安装 JDK1.6 | 第50-51页 |
| ·配置 SSH 免密码登录 | 第51页 |
| ·Hadoop 的安装与配置 | 第51-54页 |
| ·HBase 的安装与配置 | 第54-56页 |
| ·实验/运行结果及分析 | 第56-59页 |
| ·解析合并测试 | 第57-58页 |
| ·数据存储测试 | 第58-59页 |
| ·本章小结 | 第59-61页 |
| 第六章 结束语 | 第61-63页 |
| ·论文工作总结 | 第61-62页 |
| ·后续工作展望 | 第62-63页 |
| 致谢 | 第63-65页 |
| 参考文献 | 第65-67页 |
