基于Hadoop的用户特征数据统一分析平台设计与实现
| 摘要 | 第3-4页 |
| Abstract | 第4-5页 |
| 第1章 绪论 | 第9-15页 |
| 1.1 课题背景及研究目的 | 第9-10页 |
| 1.2 与课题相关的国内外研究综述 | 第10-13页 |
| 1.2.1 Hadoop 的研究现状及其应用 | 第10-11页 |
| 1.2.2 用户特征分析研究现状及其应用 | 第11-13页 |
| 1.3 本文的主要工作内容 | 第13页 |
| 1.4 本文的组织结构 | 第13-15页 |
| 第2章 用户特征分析平台的需求分析 | 第15-27页 |
| 2.1 用户特征分析平台的总体需求 | 第15-17页 |
| 2.1.1 平台的用户行为数据的定义 | 第15-16页 |
| 2.1.2 平台的用户特征的定义 | 第16页 |
| 2.1.3 平台的业务需求 | 第16-17页 |
| 2.2 用户特征分析平台的功能需求 | 第17-22页 |
| 2.2.1 数据采集的功能需求 | 第17-19页 |
| 2.2.2 数据预处理的功能需求 | 第19-21页 |
| 2.2.3 模型建立的功能需求 | 第21-22页 |
| 2.2.4 用户特征查询的功能需求 | 第22页 |
| 2.3 用户特征分析平台非功能性需求 | 第22-23页 |
| 2.4 平台关键技术分析 | 第23-26页 |
| 2.5 本章小结 | 第26-27页 |
| 第3章 用户特征分析平台的设计 | 第27-53页 |
| 3.1 用户特征分析平台模块设计 | 第27页 |
| 3.2 数据采集模块的设计 | 第27-30页 |
| 3.2.1 数据采集基础子模块的设计 | 第28-29页 |
| 3.2.2 性别识别数据采集子模块设计 | 第29页 |
| 3.2.3 年龄识别数据采集子模块设计 | 第29页 |
| 3.2.4 消费能力识别数据采集子模块设计 | 第29-30页 |
| 3.3 数据预处理模块的设计 | 第30-46页 |
| 3.3.1 预处理基础子模块的设计 | 第30-37页 |
| 3.3.2 性别识别预处理子模块设计 | 第37-40页 |
| 3.3.3 年龄识别预处理子模块设计 | 第40-42页 |
| 3.3.4 消费能力识别预处理子模块设计 | 第42-46页 |
| 3.4 模型建立模块的设计 | 第46-50页 |
| 3.4.1 支持向量机分类子模块的设计 | 第46-47页 |
| 3.4.2 朴素贝叶斯分类子模块的设计 | 第47页 |
| 3.4.3 Adaboost 分类子模块的设计 | 第47-50页 |
| 3.4.4 效果评估标准 | 第50页 |
| 3.5 特征查询模块的设计 | 第50-52页 |
| 3.5.1 缓冲区子模块的设计 | 第50-51页 |
| 3.5.2 查询服务子模块的设计 | 第51-52页 |
| 3.6 本章小结 | 第52-53页 |
| 第4章 用户特征分析平台的实现 | 第53-83页 |
| 4.1 数据采集模块的实现 | 第53-57页 |
| 4.1.1 数据采集基础子模块的实现 | 第53-54页 |
| 4.1.2 性别识别数据采集子模块实现 | 第54-55页 |
| 4.1.3 年龄识别数据采集子模块实现 | 第55页 |
| 4.1.4 消费能力识别数据采集子模块实现 | 第55-57页 |
| 4.2 数据预处理模块的实现 | 第57-75页 |
| 4.2.1 预处理基础子模块的实现 | 第57-65页 |
| 4.2.2 性别识别预处理子模块实现 | 第65-69页 |
| 4.2.3 年龄识别预处理子模块实现 | 第69-71页 |
| 4.2.4 消费能力识别预处理子模块实现 | 第71-75页 |
| 4.3 模型建立模块的实现 | 第75-78页 |
| 4.3.1 支持向量机分类子模块的实现 | 第75-76页 |
| 4.3.2 朴素贝叶斯分类子模块的实现 | 第76-77页 |
| 4.3.3 Adaboost 分类子模块的实现 | 第77-78页 |
| 4.4 特征查询模块的实现 | 第78-80页 |
| 4.4.1 缓冲区子模块的实现 | 第78-79页 |
| 4.4.2 查询服务子模块的实现 | 第79-80页 |
| 4.5 实现结果和解释 | 第80-82页 |
| 4.6 本章小结 | 第82-83页 |
| 第5章 用户特征分析平台的测试和分析 | 第83-93页 |
| 5.1 测试方案 | 第83页 |
| 5.2 功能测试 | 第83-88页 |
| 5.2.1 数据采集模块的功能测试 | 第84-85页 |
| 5.2.2 数据预处理模块的功能测试 | 第85-86页 |
| 5.2.3 模型建立模块的功能测试 | 第86-87页 |
| 5.2.4 用户特征查询模块的功能测试 | 第87-88页 |
| 5.3 平台应用测试及分析 | 第88-92页 |
| 5.3.1 用户性别识别应用测试 | 第88-89页 |
| 5.3.2 用户年龄识别应用测试 | 第89-91页 |
| 5.3.3 用户消费能力识别应用测试 | 第91-92页 |
| 5.4 本章小结 | 第92-93页 |
| 结论 | 第93-95页 |
| 参考文献 | 第95-99页 |
| 致谢 | 第99-100页 |
| 个人简历 | 第100页 |
