基于网页分块技术的主题爬行
内容提要 | 第1-6页 |
第一章 绪论 | 第6-12页 |
·面向主题的爬行技术 | 第6-10页 |
·网页分块的提出 | 第10页 |
·本文的主要工作及结构安排 | 第10-12页 |
第二章 主题爬行与网页分块技术 | 第12-24页 |
·主题爬行的原理 | 第12-16页 |
·离线初试化阶段 | 第13-14页 |
·在线初试化阶段 | 第14-16页 |
·网页分块技术 | 第16-19页 |
·网页分块技术相关算法的介绍 | 第16-18页 |
·网页分块技术的应用 | 第18-19页 |
·网页分块在主题爬行中的主要作用 | 第19-24页 |
·多主题和tunnel问题 | 第19-21页 |
·网页去重 | 第21-22页 |
·网页内容预测 | 第22-24页 |
第三章 网页分块算法 | 第24-41页 |
·网页的预处理 | 第24-26页 |
·网页的净化 | 第24-25页 |
·构建DOM树 | 第25-26页 |
·分块算法 | 第26-36页 |
·视觉信息 | 第26-28页 |
·标签信息 | 第28-29页 |
·链接信息 | 第29-31页 |
·算法描述 | 第31-36页 |
·内容块的识别和合并 | 第36-41页 |
·内容块的特征标识 | 第37-38页 |
·内容块的合并 | 第38-40页 |
·内容块重要性的判断 | 第40-41页 |
第四章 系统实现和实验结果分析 | 第41-50页 |
·系统实现 | 第41-44页 |
·实验结果分析 | 第44-49页 |
·算法的可能改进 | 第49-50页 |
第五章 工作总结和未来的工作 | 第50-53页 |
·工作总结 | 第50页 |
·未来的工作 | 第50-53页 |
参考文献 | 第53-55页 |
摘要 | 第55-58页 |
Abstract | 第58-61页 |
致谢 | 第61-62页 |
导师与作者简介 | 第62页 |