基于MapReduce用户聚类算法在Web日志挖掘中应用
摘要 | 第1-6页 |
ABSTRACT | 第6-9页 |
第一章 绪论 | 第9-13页 |
·研究背景和意义 | 第9-10页 |
·国内外研究现状 | 第10页 |
·研究目标 | 第10-11页 |
·研究的内容和组织结构 | 第11-12页 |
·本章小结 | 第12-13页 |
第二章 相关理论及技术概述 | 第13-28页 |
·Nginx日志格式 | 第13页 |
·MapReduce框架分析 | 第13-16页 |
·作业的提交 | 第14-15页 |
·作业的初始化 | 第15页 |
·任务的分配 | 第15-16页 |
·任务的执行 | 第16页 |
·Hive | 第16-22页 |
·和传统数据库进行比较 | 第17-18页 |
·Hive体系结构的内部分析 | 第18-22页 |
·Protobuffer优势 | 第22-23页 |
·日志挖掘相关算法 | 第23-27页 |
·相似度计算方法 | 第24页 |
·K-means聚类算法 | 第24-25页 |
·协同过滤推荐算法 | 第25-27页 |
·本章小结 | 第27-28页 |
第三章 用户聚类 | 第28-47页 |
·用户聚类流程 | 第28-29页 |
·数据预处理 | 第29-37页 |
·数据清理 | 第29-31页 |
·用户识别 | 第31-34页 |
·会话识别 | 第34-37页 |
·相关矩阵的构建 | 第37-41页 |
·构建访问次数维度矩阵 | 第37-38页 |
·构建访问路径维度矩阵 | 第38-39页 |
·构建语义维度矩阵 | 第39-41页 |
·用户相似度计算 | 第41-45页 |
·相似度矩阵的构建过程 | 第41-44页 |
·相似度计算 | 第44-45页 |
·聚类算法 | 第45-46页 |
·本章小结 | 第46-47页 |
第四章 实验结果 | 第47-54页 |
·系统设计 | 第47-48页 |
·实验环境 | 第48-49页 |
·实验结果与分析 | 第49-53页 |
·本章小结 | 第53-54页 |
第五章 结论 | 第54-56页 |
·论文总结 | 第54-55页 |
·论文展望 | 第55-56页 |
参考文献 | 第56-58页 |
攻读学位期间所取得的相关科研成果 | 第58-59页 |
致谢 | 第59-60页 |