基于Hadoop的上市公司舆情挖掘系统的研究与实现
| 摘要 | 第1-6页 |
| ABSTRACT | 第6-9页 |
| 第一章 绪论 | 第9-14页 |
| ·研究背景与意义 | 第9-11页 |
| ·研究课题背景 | 第9-11页 |
| ·研究意义 | 第11页 |
| ·国内外研究现状 | 第11-12页 |
| ·论文的研究工作 | 第12-13页 |
| ·论文结构安排 | 第13-14页 |
| 第二章 相关技术理论介绍 | 第14-28页 |
| ·Hadoop 平台介绍 | 第14-19页 |
| ·Hadoop 分布式文件系统介绍 | 第15-16页 |
| ·MapReduce 编程模型介绍 | 第16-19页 |
| ·数据挖掘介绍 | 第19-24页 |
| ·网络挖掘 | 第19-20页 |
| ·监督式学习 | 第20-22页 |
| ·无监督学习 | 第22-24页 |
| ·Nutch 网络爬虫介绍 | 第24-28页 |
| 第三章 上市公司舆情挖掘系统需求分析 | 第28-34页 |
| ·上市公司舆情挖掘系统概述 | 第28-29页 |
| ·上市公司舆情挖掘系统功能需求分析 | 第29-33页 |
| ·系统管理模块 | 第29-30页 |
| ·数据采集模块 | 第30-31页 |
| ·数据挖掘模块 | 第31页 |
| ·数据存储模块 | 第31-32页 |
| ·信息展示模块 | 第32-33页 |
| ·上市公司舆情挖掘系统性能需求分析 | 第33页 |
| ·本章小结 | 第33-34页 |
| 第四章 舆情挖掘系统设计 | 第34-51页 |
| ·系统总体设计 | 第34-37页 |
| ·系统设计原则 | 第34-35页 |
| ·系统设计方案 | 第35-37页 |
| ·系统模块设计 | 第37-50页 |
| ·Web 数据采集模块 | 第38-39页 |
| ·聚类分析模块 | 第39-45页 |
| ·分类预测模块 | 第45-47页 |
| ·数据存储模块 | 第47-50页 |
| ·本章小结 | 第50-51页 |
| 第五章 舆情挖掘的实现与测试 | 第51-75页 |
| ·系统平台搭建 | 第51-55页 |
| ·Hadoop 平台部署 | 第51-54页 |
| ·Nutch 爬虫部署 | 第54-55页 |
| ·数据采集模块的实现 | 第55-56页 |
| ·舆情挖掘模块的实现 | 第56-64页 |
| ·Canopy 聚类算法实现 | 第58-62页 |
| ·K-Means 聚类算法实现 | 第62-63页 |
| ·数据挖掘的实现包图 | 第63-64页 |
| ·聚类算法测试 | 第64-67页 |
| ·完整实例 | 第67-69页 |
| ·系统测试 | 第69-74页 |
| ·测试环境与用例 | 第69-70页 |
| ·功能测试 | 第70-73页 |
| ·性能测试 | 第73-74页 |
| ·本章小结 | 第74-75页 |
| 第六章 总结与展望 | 第75-76页 |
| 致谢 | 第76-77页 |
| 参考文献 | 第77-81页 |
| 攻硕期间取得的研究成果 | 第81-82页 |