摘要 | 第1-6页 |
Abstract | 第6-10页 |
第1章 绪论 | 第10-15页 |
·课题研究背景 | 第10-11页 |
·国内外研究现状 | 第11-13页 |
·搜索引擎发展介绍 | 第11-12页 |
·聚焦爬虫研究现状 | 第12-13页 |
·本文主要工作 | 第13-15页 |
·论文的主要研究内容 | 第13页 |
·论文的组织结构安排 | 第13-15页 |
第2章 面向主题的聚焦爬虫原理及关键技术 | 第15-29页 |
·垂直搜索引擎的基本原理 | 第15-17页 |
·垂直搜索引擎的系统架构 | 第15-16页 |
·垂直搜索引擎的基本工作流程 | 第16-17页 |
·聚焦爬虫的基本原理与结构 | 第17-21页 |
·Web 信息提取器 | 第18-19页 |
·网页去重检测器 | 第19-20页 |
·网页分析控制器 | 第20页 |
·URL 处理器 | 第20-21页 |
·主题 Web 页面分布特性 | 第21-22页 |
·Hub 特征 | 第21页 |
·Linkage/Sibling Locality 特征 | 第21-22页 |
·站点主题聚集特征 | 第22页 |
·Tunnel 特征 | 第22页 |
·主题相关性判别算法研究 | 第22-28页 |
·基于元数据的判别 | 第22-23页 |
·基于链接标签数据的判别 | 第23-24页 |
·基于链接结构分析的判别 | 第24-26页 |
·基于页面语义信息的判别 | 第26-28页 |
·本章小结 | 第28-29页 |
第3章 基于立即价值的自适应免疫爬行策略研究 | 第29-38页 |
·聚焦爬虫的爬行策略 | 第29页 |
·网页的主题相关度评价方法 | 第29-33页 |
·页面内容相关度计算 | 第29-31页 |
·链接结构重要度计算 | 第31-32页 |
·网页主题相关度评价方法 | 第32-33页 |
·基于立即价值的自适应免疫聚焦爬行策略 | 第33-37页 |
·自适应免疫算法 | 第33-35页 |
·免疫算法参数的自适应调节 | 第35页 |
·自适应免疫算法爬行流程 | 第35-36页 |
·算法实验仿真 | 第36-37页 |
·本章小结 | 第37-38页 |
第4章 基于立即价值和未来价值的智能爬行策略研究 | 第38-47页 |
·基于立即值和未来值回报的爬行原理 | 第38-39页 |
·算法思想 | 第39页 |
·算法相关定义 | 第39页 |
·量子行为进化算法研究 | 第39-44页 |
·权重值的自适应调节 | 第40-43页 |
·QBEA 算法流程 | 第43-44页 |
·基于量子行为进化算法的聚焦爬行策略 | 第44-45页 |
·适应度函数选取 | 第44页 |
·量子行为进化算法的聚焦爬行策略流程 | 第44-45页 |
·算法实验仿真 | 第45-46页 |
·本章小结 | 第46-47页 |
第5章 聚焦爬虫原型系统的设计与实现 | 第47-54页 |
·体系结构及设计目标 | 第47-48页 |
·系统开发及运行环境 | 第48页 |
·系统功能介绍及实现 | 第48-52页 |
·系统功能介绍 | 第48-50页 |
·系统功能实现 | 第50-52页 |
·本章小结 | 第52-54页 |
结论 | 第54-56页 |
参考文献 | 第56-60页 |
攻读硕士学位期间发表的论文和取得的科研成果 | 第60-61页 |
致谢 | 第61页 |