基于MapReduce编程模型的航空日志分析研究
| 摘要 | 第1-6页 |
| Abstract | 第6-10页 |
| 第1章 前言 | 第10-14页 |
| ·研究背景及意义 | 第10-11页 |
| ·国内外研究现状 | 第11-12页 |
| ·研究内容 | 第12页 |
| ·论文结构 | 第12-14页 |
| 第2章 Hadoop 分布式计算平台技术 | 第14-22页 |
| ·MapReduce 编程模型 | 第14-16页 |
| ·MapReduce 处理流程 | 第14-15页 |
| ·MapReduce 作业运行方式 | 第15-16页 |
| ·分布式文件系统 HDFS | 第16-19页 |
| ·HDFS 数据管理的优点 | 第18页 |
| ·HDFS 的设计目标 | 第18-19页 |
| ·Hadoop 的优点 | 第19-20页 |
| ·Hadoop 并行计算处理过程 | 第20-22页 |
| 第3章 数据挖掘技术与日志文件分析方法 | 第22-30页 |
| ·数据挖掘技术 | 第22-23页 |
| ·数据挖掘任务 | 第23-25页 |
| ·日志分析处理方法 | 第25-30页 |
| ·自助值机系统日志文件的特点 | 第26-28页 |
| ·日志文件的预处理方法 | 第28-30页 |
| 第4章 分布式并行日志分析系统的设计和实现 | 第30-50页 |
| ·系统需求分析 | 第30-31页 |
| ·日志分析系统的层次结构设计 | 第31-34页 |
| ·数据访问模块 | 第32页 |
| ·数据处理 | 第32-33页 |
| ·应用交互模块 | 第33-34页 |
| ·日志分析功能详细设计与实现 | 第34-50页 |
| ·系统功能结构及处理流程 | 第34-35页 |
| ·系统类图设计 | 第35-37页 |
| ·数据获取和数据预处理的实现 | 第37-39页 |
| ·日志分析的设计和实现 | 第39-47页 |
| ·分布式并行日志分析工作流程 | 第39-40页 |
| ·数据库结构设计 | 第40-41页 |
| ·日志分析的并行处理 | 第41-44页 |
| ·并行日志分析性能分析 | 第44-47页 |
| ·数据展示模块的设计和实现 | 第47页 |
| ·数据管理模块的设计和实现 | 第47-50页 |
| 第5章 分布式日志分析系统运行实例 | 第50-60页 |
| ·集群环境的搭建 | 第50-52页 |
| ·系统功能说明 | 第52-53页 |
| ·日志数据载入和预处理实例 | 第53-54页 |
| ·日志数据载入 | 第54页 |
| ·日志数据预处理 | 第54页 |
| ·分布式日志数据统计分析 | 第54-55页 |
| ·分析结果展示 | 第55-57页 |
| ·折线图展示 | 第55-56页 |
| ·饼状图展示 | 第56-57页 |
| ·分析结果查询 | 第57-58页 |
| ·分析结果导出与发送 | 第58-60页 |
| 结论 | 第60-62页 |
| 致谢 | 第62-64页 |
| 参考文献 | 第64-67页 |
| 攻读学位期间取得学术成果 | 第67页 |
