基于元搜索的舆情信息采集系统的设计与实现
致谢 | 第1-6页 |
摘要 | 第6-8页 |
ABSTRACT | 第8-12页 |
1 绪论 | 第12-17页 |
·研究背景 | 第12-13页 |
·搜索引擎的研究现状 | 第13-14页 |
·搜索引擎的问题定义 | 第14-15页 |
·研究内容和目标 | 第15-16页 |
·论文的难点和关键任务 | 第16页 |
·论文的组织结构 | 第16-17页 |
2 元搜索技术综述 | 第17-27页 |
·元搜索系统结构 | 第17-18页 |
·成员搜索引擎调度策略 | 第18-19页 |
·查询转换和页面采集技术 | 第19页 |
·元搜索引擎消重技术 | 第19-21页 |
·元搜索结果排序 | 第21-25页 |
·元搜索结果排序算法 | 第21-22页 |
·HITS算法 | 第22-25页 |
·网络爬虫 | 第25-26页 |
·本章小结 | 第26-27页 |
3 元搜索技术问题分析和优化方案设计 | 第27-45页 |
·元搜索系统结构的优化和改进 | 第27-33页 |
·基于搜索优化的元搜索存储问题识别 | 第27-29页 |
·基于倒排索引的方案优选 | 第29-33页 |
·查询转换和页面分析 | 第33-36页 |
·元搜索引擎查询转换和页面分析 | 第33-34页 |
·定向采集站点查询转换和页面分析 | 第34-36页 |
·元搜索网页消重算法的优选 | 第36-38页 |
·元搜索结果排序算法的改进 | 第38-44页 |
·HITS算法的“主题漂移”问题 | 第38页 |
·元搜索结果排序算法改进的基本思路 | 第38-40页 |
·改进后的元搜索结果排序算法逻辑设计 | 第40-43页 |
·HITS算法改进方案设计 | 第43-44页 |
·本章小结 | 第44-45页 |
4 基于元搜索的舆情信息采集系统的设计与实现 | 第45-66页 |
·概要设计 | 第45-52页 |
·系统架构 | 第45-48页 |
·系统概念模型 | 第48-52页 |
·代码框架设计 | 第52页 |
·详细设计和实现 | 第52-65页 |
·成员搜索引擎调度模块 | 第53页 |
·查询转换和页面采集模块 | 第53-56页 |
·消重模块 | 第56-58页 |
·排序模块 | 第58-61页 |
·系统数据库设计 | 第61-65页 |
·本章小结 | 第65-66页 |
5 系统性能分析和测试 | 第66-70页 |
·元搜索查全率统计分析 | 第66页 |
·排序结果比较 | 第66-69页 |
·直观数据 | 第67-68页 |
·PV和CTR统计分析 | 第68-69页 |
·本章小结 | 第69-70页 |
6 结论 | 第70-72页 |
·工作总结 | 第70-71页 |
·工作不足和展望 | 第71-72页 |
参考文献 | 第72-74页 |
附录A | 第74-75页 |
索引 | 第75-76页 |
作者简历及攻读硕士/博士学位期间取得的研究成果 | 第76-78页 |
学位论文数据集 | 第78页 |