支持云计算产品RIA模式页面数据抓取的模型和策略研究
| 摘要 | 第1-4页 |
| ABSTRACT | 第4-8页 |
| 第1章 绪论 | 第8-18页 |
| ·研究背景与目的意义 | 第8-11页 |
| ·国内外研究现状 | 第11-15页 |
| ·抓取模型 | 第11-13页 |
| ·抓取策略 | 第13-15页 |
| ·主要研究工作与方法 | 第15页 |
| ·主要研究内容 | 第15-18页 |
| 第2章 相关技术理论介绍 | 第18-30页 |
| ·构建RIA的关键技术 | 第19-22页 |
| ·Ajax的原理和简介 | 第19-21页 |
| ·jQuery的原理和简介 | 第21-22页 |
| ·模型和策略的理论介绍 | 第22-26页 |
| ·抓取模型架构理论 | 第22-24页 |
| ·抓取策略理论 | 第24-26页 |
| ·Scrapy框架介绍 | 第26-28页 |
| ·Selenium简介 | 第28页 |
| ·本章小结 | 第28-30页 |
| 第3章 模型与策略分析 | 第30-36页 |
| ·抓取研究面临的问题 | 第32-33页 |
| ·抓取模型问题分析 | 第33-34页 |
| ·脚本解析问题分析 | 第33页 |
| ·用户事件触发问题分析 | 第33-34页 |
| ·抓取策略问题分析 | 第34-35页 |
| ·页面建模问题分析 | 第34-35页 |
| ·抓取算法问题分析 | 第35页 |
| ·本章小结 | 第35-36页 |
| 第4章 模型与策略设计 | 第36-54页 |
| ·抓取模型设计 | 第36-45页 |
| ·抓取模型架构设计 | 第36-39页 |
| ·脚本解析方案设计 | 第39-40页 |
| ·事件触发方案设计 | 第40-41页 |
| ·模型主要模块处理流程设计 | 第41-45页 |
| ·Spider模块处理流程 | 第41-42页 |
| ·Rules及其构建流程 | 第42-43页 |
| ·Scheduler模块处理流程 | 第43-44页 |
| ·DOM Storage模块处理流程 | 第44-45页 |
| ·抓取策略设计 | 第45-53页 |
| ·目标页面建模方案设计 | 第45-50页 |
| ·建立新模型 | 第47-50页 |
| ·抓取算法方案设计 | 第50-52页 |
| ·抓取策略处理流程设计 | 第52-53页 |
| ·本章小结 | 第53-54页 |
| 第5章 实例运行实验 | 第54-68页 |
| ·实验环境 | 第56-57页 |
| ·硬件环境 | 第56页 |
| ·软件环境 | 第56-57页 |
| ·实验环境架构 | 第57页 |
| ·初始设置 | 第57-60页 |
| ·系统支持组件包部署 | 第58页 |
| ·URLs及Rules初始实验数据设置 | 第58-60页 |
| ·Spider模块参数设置 | 第60页 |
| ·其它参数设置 | 第60页 |
| ·实验及结果 | 第60-64页 |
| ·结果分析 | 第64-67页 |
| ·本章小结 | 第67-68页 |
| 第6章 总结与展望 | 第68-70页 |
| ·总结 | 第68-69页 |
| ·不足与展望 | 第69-70页 |
| 参考文献 | 第70-74页 |
| 致谢 | 第74-75页 |
