主题网络爬虫关键技术的研究与应用
| 摘要 | 第1-6页 |
| Abstract | 第6-10页 |
| 第1章 绪论 | 第10-16页 |
| ·研究背景与意义 | 第10-11页 |
| ·国内外研究现状 | 第11-14页 |
| ·国外研究现状 | 第12-13页 |
| ·国内研究现状 | 第13-14页 |
| ·研究中的主要问题 | 第14页 |
| ·本文组织结构 | 第14-16页 |
| 第2章 主题爬虫模型 | 第16-27页 |
| ·主题爬虫系统框架 | 第17-18页 |
| ·页面下载模块 | 第18-19页 |
| ·正文提取模块 | 第19-23页 |
| ·主题判别模块 | 第23-26页 |
| ·向量空间模型 | 第24页 |
| ·常用分类算法 | 第24-26页 |
| ·本章小结 | 第26-27页 |
| 第3章 基于改进贝叶斯分类器的主题判别算法 | 第27-39页 |
| ·朴素贝叶斯分类 | 第27-28页 |
| ·特征降维 | 第28-31页 |
| ·文本关键词自动提取 | 第31-36页 |
| ·语义加权网络 | 第31-32页 |
| ·词语重要性度量 | 第32-34页 |
| ·关键词提取算法 | 第34-36页 |
| ·改进贝叶斯分类器判别主题 | 第36-37页 |
| ·实验分析 | 第37-38页 |
| ·本章小结 | 第38-39页 |
| 第4章 主题搜索策略研究 | 第39-48页 |
| ·Web 链接和页面分布特性 | 第39-41页 |
| ·链接构成分析 | 第39页 |
| ·主题页面分布特性 | 第39-41页 |
| ·通用搜索策略 | 第41-42页 |
| ·常用主题搜索策略 | 第42-44页 |
| ·基于内容评价的搜索策略 | 第42-43页 |
| ·基于链接结构评价的搜索策略 | 第43-44页 |
| ·改进的 Best-First 搜索策略 | 第44-47页 |
| ·本章小结 | 第47-48页 |
| 第5章 主题爬虫系统设计与实现 | 第48-58页 |
| ·主题爬虫系统实现 | 第48-51页 |
| ·软硬件环境 | 第48页 |
| ·系统实现结构 | 第48-49页 |
| ·系统工作流程 | 第49-51页 |
| ·正文提取模块测试 | 第51-52页 |
| ·单一页面测试 | 第51-52页 |
| ·准确率测试 | 第52页 |
| ·关键词提取模块测试 | 第52-54页 |
| ·单文本测试 | 第52-53页 |
| ·准确率测试 | 第53-54页 |
| ·主题判别模块测试 | 第54-56页 |
| ·基于类别关键词的贝叶斯分类算法搜索效率测试 | 第54-55页 |
| ·类别关键词比例λ的设置 | 第55-56页 |
| ·改进的搜索策略测试 | 第56-57页 |
| ·本章小结 | 第57-58页 |
| 结论 | 第58-60页 |
| 参考文献 | 第60-64页 |
| 攻读硕士期间发表论文与研究成果清单 | 第64-65页 |
| 致谢 | 第65页 |
