摘要 | 第1-5页 |
ABSTRACT | 第5-9页 |
第1章 绪论 | 第9-15页 |
·选题背景和意义 | 第9-11页 |
·相关研究 | 第11-13页 |
·本文工作 | 第13-14页 |
·本文结构 | 第14页 |
·本章小结 | 第14-15页 |
第2章 网络爬虫以及相关研究 | 第15-25页 |
·网络爬虫 | 第15-16页 |
·基本原理 | 第15页 |
·工作流程 | 第15-16页 |
·网络爬虫抓取策略 | 第16-17页 |
·广度优先策略 | 第16页 |
·深度优先策略 | 第16页 |
·最佳优先策略 | 第16-17页 |
·深层网络爬虫 | 第17-24页 |
·深层网络爬虫的定义和研究目标 | 第17-19页 |
·深层网络爬虫研究进展 | 第19-23页 |
·基于领域知识的爬虫技术 | 第19-21页 |
·基于网页结构分析的爬虫技术 | 第21-23页 |
·基于脚本语言分析的爬虫技术 | 第23页 |
·深层网络爬虫的研究趋势 | 第23-24页 |
·关于AJAX技术的深层网络爬虫 | 第24页 |
·多媒体网络爬虫研究 | 第24页 |
·对等网络P2P(peer-to-peer) | 第24页 |
·本章小结 | 第24-25页 |
第3章 AJAX网络爬虫系统设计方案 | 第25-31页 |
·相关概念 | 第25-27页 |
·Web2.0 | 第25-26页 |
·javascript | 第26页 |
·AJAX及其特点 | 第26-27页 |
·AJAX网络爬虫系统总体设计方案 | 第27-28页 |
·AJAX网络爬虫的技术难点及解决方案 | 第28-30页 |
·本章小结 | 第30-31页 |
第4章 AJAX网络爬虫系统实现 | 第31-47页 |
·相关技术 | 第31-37页 |
·HTTP协议 | 第31-32页 |
·HTML | 第32页 |
·XML | 第32-34页 |
·XHTML | 第34-35页 |
·DOM | 第35页 |
·XPath | 第35-36页 |
·Web信息抽取、Web信息检索、Web挖掘 | 第36-37页 |
·信息抽取与信息检索 | 第36页 |
·Web 信息抽取与 Web 挖掘 | 第36-37页 |
·网页抓取模块 | 第37-40页 |
·网页抓取模块流程 | 第37页 |
·网页抓取模块的相关实现 | 第37-40页 |
·网络编程基本概念及两种传输协议简介 | 第37-38页 |
·Java网络编程 | 第38-40页 |
·网页分析模块 | 第40-41页 |
·网页中嵌入javascript的方法 | 第40页 |
·网页分析模块流程 | 第40-41页 |
·程序切片模块 | 第41-43页 |
·程序切片流程 | 第41-42页 |
·关键算法 | 第42-43页 |
·脚本执行模块 | 第43-44页 |
·程序切片模块、爬虫模块、脚本执行模块之间的互操作 | 第44页 |
·构建javascript切片的有限状态机 | 第44页 |
·程序切片模块、脚本执行模块之间的互操作 | 第44页 |
·程序切片模块、爬虫模块、脚本执行模块之间的互操作 | 第44页 |
·DOM支持模块 | 第44-45页 |
·页面生成模块 | 第45-46页 |
·本章小结 | 第46-47页 |
第5章 AJAX网络爬虫系统测试 | 第47-52页 |
·软件测试 | 第47-48页 |
·测试内容 | 第48-49页 |
·AJAX框架站点的测试 | 第48-49页 |
·非AJAX框架站点的测试 | 第49页 |
·结论 | 第49-52页 |
第6章 总结与展望 | 第52-54页 |
·总结 | 第52-53页 |
·展望——不足与改进 | 第53-54页 |
参考文献 | 第54-57页 |
致谢 | 第57-58页 |
在读期间发表的学术论文与取得的研究成果 | 第58页 |