基于元搜索引擎的主题导向网络舆情采集系统研究与设计
| 摘要 | 第9-11页 |
| Abstract | 第11-12页 |
| 第一章 绪论 | 第13-19页 |
| 1.1 项目背景与意义 | 第13-14页 |
| 1.2 国内外研究现状 | 第14-16页 |
| 1.3 研究目的与主要内容 | 第16-17页 |
| 1.4 论文的组织结构 | 第17-19页 |
| 第二章 相关理论和关键技术 | 第19-28页 |
| 2.1 网络舆情的要素和特征 | 第19页 |
| 2.2 网络舆情的采集来源 | 第19-20页 |
| 2.3 主题网络爬虫的基本概念 | 第20-22页 |
| 2.4 网络爬虫的爬行策略和技术 | 第22-25页 |
| 2.4.1 网页搜索策略 | 第22-23页 |
| 2.4.2 重新访问策略 | 第23页 |
| 2.4.3 平衡礼貌策略 | 第23-24页 |
| 2.4.4 主题设置的采集策略 | 第24页 |
| 2.4.5 网络爬虫技术 | 第24-25页 |
| 2.5 元搜索引擎技术 | 第25-26页 |
| 2.6 个性化搜索技术 | 第26-27页 |
| 2.6.1 个性化技术的研究现状 | 第27页 |
| 2.6.2 个性化搜索的主要方法 | 第27页 |
| 2.7 本章小结 | 第27-28页 |
| 第三章 系统的需求分析 | 第28-34页 |
| 3.1 元搜索引擎需求分析 | 第28页 |
| 3.2 主题导向搜索引擎需求分析 | 第28-29页 |
| 3.3 系统需求分析 | 第29-30页 |
| 3.3.1 系统需求目标 | 第29页 |
| 3.3.2 系统的最终用户 | 第29-30页 |
| 3.4 系统用例模型 | 第30-33页 |
| 3.5 本章小结 | 第33-34页 |
| 第四章 系统的研究和设计 | 第34-54页 |
| 4.1 系统架构设计 | 第34-35页 |
| 4.2 系统功能实现方案 | 第35-36页 |
| 4.3 系统后台结构设计 | 第36-49页 |
| 4.3.1 后台整体数据流 | 第37-38页 |
| 4.3.2 下载线程与下载控制线程 | 第38-41页 |
| 4.3.3 URL解析线程与控制线程 | 第41-43页 |
| 4.3.4 文档结构解析线程与控制线程 | 第43-45页 |
| 4.3.5 分词索引线程和控制线程 | 第45-47页 |
| 4.3.6 查询过滤线程和控制线程 | 第47-49页 |
| 4.4 系统前台结构设计 | 第49页 |
| 4.5 元搜索引擎设计 | 第49-52页 |
| 4.5.1 元搜索引擎模型 | 第49-50页 |
| 4.5.2 元搜索引擎的提取算法 | 第50-51页 |
| 4.5.3 元搜索引擎主题导向爬行器设计 | 第51-52页 |
| 4.6 系统数据库设计 | 第52-53页 |
| 4.7 本章小结 | 第53-54页 |
| 第五章 实验与结果分析 | 第54-63页 |
| 5.1 实验设置 | 第54-55页 |
| 5.1.1 实验环境设置 | 第54页 |
| 5.1.2 实验数据设置 | 第54-55页 |
| 5.1.3 实验评价标准 | 第55页 |
| 5.2 主题爬虫实验 | 第55-60页 |
| 5.2.1 实验目的 | 第55页 |
| 5.2.2 实验内容 | 第55-58页 |
| 5.2.3 实验结果分析 | 第58-60页 |
| 5.3 元搜索实验 | 第60-62页 |
| 5.3.1 实验目的 | 第60页 |
| 5.3.2 实验内容 | 第60-62页 |
| 5.3.3 实验结果分析 | 第62页 |
| 5.4 本章小结 | 第62-63页 |
| 第六章 总结与展望 | 第63-65页 |
| 6.1 系统主要功能实现 | 第63页 |
| 6.2 工作总结 | 第63-64页 |
| 6.3 工作展望 | 第64-65页 |
| 参考文献 | 第65-68页 |
| 致谢 | 第68页 |
