Web信息内容变化检测技术研究与实现
摘要 | 第1-7页 |
Abstract | 第7-9页 |
目录 | 第9-11页 |
第1章 绪论 | 第11-18页 |
·课题研究意义 | 第11-13页 |
·国内外现状分析 | 第13-16页 |
·Web信息提取 | 第13页 |
·变化检测算法 | 第13-14页 |
·网页变化频率的估测 | 第14-15页 |
·增量采集系统与网页检测工具 | 第15-16页 |
·本文研究内容 | 第16页 |
·论文结构安排 | 第16页 |
·本章小结 | 第16-18页 |
第2章 Web信息内容变化检测技术研究 | 第18-29页 |
·Web信息内容变化检测关键技术 | 第18-23页 |
·网页变化检测策略 | 第18-19页 |
·网页变化频率估测方法 | 第19-21页 |
·网页变化检测技术分类 | 第21-23页 |
·Web信息提取 | 第23-26页 |
·基于数据挖掘的网页正文提取技术 | 第25页 |
·基于包装器的网页正文提取技术 | 第25页 |
·基于统计的网页正文提取技术 | 第25-26页 |
·Web信息内容变化检测相关的支持技术 | 第26-28页 |
·DOM | 第26页 |
·XPath | 第26-27页 |
·Eclipse RCP | 第27页 |
·SWT Designer | 第27-28页 |
·本章小结 | 第28-29页 |
第3章 Web信息内容变化检测方案的设计 | 第29-38页 |
·问题的提出 | 第29页 |
·解决方案的总体架构 | 第29-32页 |
·基于统计的网页正文提取方法 | 第32-33页 |
·基于文档树结构的变化检测方法 | 第33-34页 |
·基于网页历史数据窗口的频率估测方法 | 第34页 |
·数据库设计 | 第34-37页 |
·本章小结 | 第37-38页 |
第4章 Web信息内容变化检测方案的具体实现 | 第38-62页 |
·Web页面的预处理 | 第38-43页 |
·html文档清洗 | 第39-40页 |
·中文字符编码类型获取 | 第40-42页 |
·html文档解析 | 第42-43页 |
·网页正文定位 | 第43-48页 |
·网页页面布局 | 第43-44页 |
·网页类型判断 | 第44页 |
·基于文本密度的正文定位 | 第44-47页 |
·XPath定位节点方法 | 第47-48页 |
·定制检测信息 | 第48-50页 |
·基于网页摘要编码的网页变化检测 | 第50-59页 |
·网页摘要编码 | 第51-56页 |
·基于网页摘要编码的网页结构比较 | 第56-57页 |
·基于网页摘要编码的网页内容比较 | 第57-58页 |
·网页变化频率的估计与网页最新修改时间更新 | 第58-59页 |
·网页信息的读取和存储 | 第59-60页 |
·变化标记和显示 | 第60-62页 |
第5章 Web信息内容变化检测系统与实验 | 第62-69页 |
·系统界面介绍 | 第62-65页 |
·实验结果及分析 | 第65-69页 |
·正文节点的定位实验及结果分析 | 第65-66页 |
·网页摘要编码实验及结果分析 | 第66-67页 |
·页内容变化检测实验及结果分析 | 第67-69页 |
第6章 总结和展望 | 第69-71页 |
·总结 | 第69-70页 |
·展望 | 第70-71页 |
致谢 | 第71-72页 |
参考文献 | 第72-76页 |
攻读硕士学位期间发表的论文 | 第76页 |