| 摘要 | 第1-4页 |
| ABSTRACT | 第4-9页 |
| 1 绪论 | 第9-14页 |
| ·论文研究背景和意义 | 第9-10页 |
| ·国内外研究现状和发展趋势 | 第10-11页 |
| ·本文的研究内容与主要贡献 | 第11-12页 |
| ·主要研究内容 | 第11-12页 |
| ·主要贡献 | 第12页 |
| ·论文组织结构 | 第12-14页 |
| 2 模式挖掘 | 第14-25页 |
| ·频繁模式挖掘定义 | 第14-15页 |
| ·经典频繁模式挖掘算法 | 第15-20页 |
| ·效用模式挖掘的产生和具体定义 | 第20-22页 |
| ·效用模式挖掘的产生 | 第20页 |
| ·效用模式挖掘的定义 | 第20-22页 |
| ·经典效用模式挖掘算法 | 第22-24页 |
| ·本章小结 | 第24-25页 |
| 3 分布式并行计算模型MapReduce和Spark | 第25-37页 |
| ·并行计算模型MapReduce | 第25-28页 |
| ·Hadoop的产生 | 第25-26页 |
| ·MapReduce的编程模型 | 第26-27页 |
| ·MapReduce的工作原理 | 第27-28页 |
| ·并行计算模型Spark | 第28-34页 |
| ·Spark的产生 | 第28-29页 |
| ·弹性分布式数据集RDD | 第29-33页 |
| ·Spark集群 | 第33-34页 |
| ·MapReduce和Spark的对比 | 第34-35页 |
| ·基于MapReduce和Spark的并行模式挖掘算法 | 第35-36页 |
| ·本章小结 | 第36-37页 |
| 4 基于MapReduce并行挖掘频繁模式的新算法Pamph | 第37-57页 |
| ·混合挖掘策略 | 第37-41页 |
| ·混合挖掘策略的思路 | 第38-39页 |
| ·宽度优先挖掘到深度优先挖掘的自动转换 | 第39-40页 |
| ·宽度优先挖掘中使用的剪枝(prune)技术 | 第40-41页 |
| ·数据格式 | 第41-44页 |
| ·宽度优先挖掘策略中所用的数据格式mixset | 第41-43页 |
| ·深度优先挖掘策略中所用的数据格式 | 第43页 |
| ·垂直数据格式mixset转换为水平数据格式 | 第43-44页 |
| ·并行挖掘算法Pamph | 第44-48页 |
| ·统计一阶频繁模式作业(Job1) | 第45-46页 |
| ·混合挖掘作业(Job2) | 第46-48页 |
| ·小规模集群下的实验分析 | 第48-55页 |
| ·和已有算法DPC、PFP运行时间的对比 | 第48-50页 |
| ·扩展性实验 | 第50-51页 |
| ·Pamph算法剖析 | 第51-55页 |
| ·大规模集群下的实验分析 | 第55-56页 |
| ·本章小结 | 第56-57页 |
| 5 基于Spark并行挖掘效用模式的新算法Phps | 第57-70页 |
| ·搜索策略 | 第57页 |
| ·数据结构UtilityList的改进和裁剪策略 | 第57-59页 |
| ·并行效用模式挖掘算法Phps | 第59-65页 |
| ·算法第一阶段 | 第59-61页 |
| ·算法第二阶段 | 第61-63页 |
| ·算法第三阶段 | 第63-65页 |
| ·实验对比分析 | 第65-68页 |
| ·实验对比算法 | 第65-66页 |
| ·实验环境和数据集 | 第66-67页 |
| ·实验结果与分析 | 第67-68页 |
| ·本章小结 | 第68-70页 |
| 6 总结与展望 | 第70-71页 |
| ·论文总结 | 第70页 |
| ·未来展望 | 第70-71页 |
| 参考文献 | 第71-74页 |
| 本文作者硕士期间参加的科研项目及学术成果 | 第74-75页 |
| 致谢 | 第75-76页 |