web舆情信息自动化采集系统的设计与实现
摘要 | 第5-6页 |
ABSTRACT | 第6-7页 |
第一章 绪论 | 第11-16页 |
1.1 课题研究的背景及意义 | 第11-13页 |
1.2 国内外研究现状 | 第13-14页 |
1.3 本课题主要的研究内容 | 第14-15页 |
1.4 论文组织 | 第15-16页 |
第二章 WEB舆情信息自动化采集技术总结 | 第16-31页 |
2.1 WEB标准概述 | 第16-18页 |
2.1.1 结构 | 第16-17页 |
2.1.2 表现 | 第17页 |
2.1.3 行为 | 第17-18页 |
2.2 舆情相关概述 | 第18-19页 |
2.2.1 舆情的定义 | 第18页 |
2.2.2 舆情信息的定义 | 第18-19页 |
2.3 互联网舆情信息采集技术 | 第19-22页 |
2.3.1 采集来源 | 第19-20页 |
2.3.2 采集内容 | 第20-22页 |
2.4 WEB舆情信息自动化采集模型 | 第22-25页 |
2.4.1 理解模型 | 第22-23页 |
2.4.2 对象树模型 | 第23-25页 |
2.4.3 视觉模型 | 第25页 |
2.5 WEB舆情信息自动化采集算法 | 第25-30页 |
2.5.1 本体论算法 | 第26-27页 |
2.5.2 马尔可夫算法 | 第27-28页 |
2.5.3 动态贝叶斯算法 | 第28-30页 |
2.5.4 条件随机场算法 | 第30页 |
2.6 本章小结 | 第30-31页 |
第三章 自动化舆情采集系统需求分析 | 第31-38页 |
3.1 需求描述 | 第31-32页 |
3.2 功能性需求分析 | 第32-35页 |
3.2.1 用户与权限管理 | 第32-34页 |
3.2.2 常规舆情采集 | 第34-35页 |
3.2.3 采集结果浏览 | 第35页 |
3.2.4 采集受限的突破 | 第35页 |
3.2.5 舆情操作 | 第35页 |
3.3 非功能性需求分析 | 第35-37页 |
3.3.1 安全性需求 | 第36页 |
3.3.2 易用性 | 第36页 |
3.3.3 维护性 | 第36页 |
3.3.4 性能指标 | 第36页 |
3.3.5 其他指标 | 第36-37页 |
3.4 系统开发环境 | 第37页 |
3.5 本章小结 | 第37-38页 |
第四章 WEB舆情采集系统总体设计 | 第38-48页 |
4.1 系统处理流程 | 第38页 |
4.2 系统总体架构 | 第38-39页 |
4.3 系统部署 | 第39-41页 |
4.4 系统模块设计 | 第41-47页 |
4.5 本章小结 | 第47-48页 |
第五章 WEB舆情采集系统详细设计与实现 | 第48-71页 |
5.1 WEB舆情信息采集模板详细设计 | 第48-53页 |
5.1.1 数据类型 | 第50页 |
5.1.2 变量 | 第50页 |
5.1.3 预定义变量 | 第50-53页 |
5.2 可视化的模版生成器 | 第53-60页 |
5.2.1 功能概述 | 第53-55页 |
5.2.2 浏览器功能实现 | 第55-56页 |
5.2.3 xpath和正则表达式的自动生成 | 第56-60页 |
5.3 网页下载模块 | 第60-62页 |
5.4 内容提取 | 第62-64页 |
5.4.1 通过xpath和正则表达式提取内容 | 第62页 |
5.4.2 基于块分布函数的正文内容提取 | 第62-64页 |
5.5 内容分析 | 第64-68页 |
5.5.1 数据预处理 | 第64-65页 |
5.5.2 处理流程 | 第65-68页 |
5.6 舆情查看 | 第68-70页 |
5.7 本章小结 | 第70-71页 |
第六章 测试分析 | 第71-79页 |
6.1 测试与分析 | 第71-78页 |
6.1.1 测试方法 | 第71-74页 |
6.1.2 测试过程 | 第74-77页 |
6.1.3 测试结果分析 | 第77-78页 |
6.2 本章小结 | 第78-79页 |
第七章 总结与展望 | 第79-80页 |
7.1 小结 | 第79页 |
7.2 不足与展望 | 第79-80页 |
致谢 | 第80-81页 |
参考文献 | 第81-83页 |