农产品信息采集与发布平台的研究和实现
摘要 | 第10-12页 |
Abstract | 第12-13页 |
第一章 绪论 | 第14-22页 |
1.1 研究背景 | 第14-15页 |
1.1.1 农产品价格问题 | 第14页 |
1.1.2 农产品信息数据的获取方式 | 第14-15页 |
1.1.3 农产品信息获取中的问题 | 第15页 |
1.2 研究意义 | 第15-16页 |
1.3 Web采集技术国内外研究现状 | 第16-19页 |
1.3.1 基于整个Web的信息采集 | 第16页 |
1.3.2 增量式Web信息采集 | 第16页 |
1.3.3 基于主题的Web信息采集 | 第16-17页 |
1.3.4 基于用户个性化的Web信息采集 | 第17-18页 |
1.3.5 分布式Web信息采集 | 第18页 |
1.3.6 迁移的Web信息采集 | 第18-19页 |
1.4 本文工作及组织结构 | 第19-22页 |
1.4.1 本文主要工作 | 第19-20页 |
1.4.2 本文章节安排 | 第20-22页 |
第二章 Web信息采集相关技术 | 第22-34页 |
2.1 网络爬虫相关技术 | 第22-27页 |
2.1.1 网络爬虫介绍 | 第22-23页 |
2.1.2 网络爬虫的搜索策略 | 第23-24页 |
2.1.3 Heritrix介绍 | 第24-26页 |
2.1.4 开源网络爬虫介绍 | 第26-27页 |
2.2 网页信息抽取相关技术 | 第27-30页 |
2.2.1 URL解析 | 第27页 |
2.2.2 Html页面内容分析方法 | 第27-30页 |
2.3 系统开发相关技术 | 第30-34页 |
2.3.1 系统开发环境及工具 | 第30-32页 |
2.3.2 系统体系结构B/S | 第32-33页 |
2.3.3 技术实现路线 | 第33页 |
2.3.4 系统发布 | 第33-34页 |
第三章 农产品Web信息采集 | 第34-54页 |
3.1 利用Heritrix采集农产品信息 | 第34-47页 |
3.1.1 网站和种子页面的选择 | 第34-36页 |
3.1.2 网页内容抓取 | 第36-39页 |
3.1.3 网页内容解析 | 第39-41页 |
3.1.4 产品信息存储 | 第41-47页 |
3.2 基于正则表达式的农产品信息采集 | 第47-51页 |
3.2.1 Python语言的优势 | 第47-48页 |
3.2.2 农产品信息采集的过程 | 第48-50页 |
3.2.3 正则表达式的应用 | 第50-51页 |
3.3 Web信息采集方式比较 | 第51-54页 |
第四章 农产品市场价格时间序列预测法研究 | 第54-64页 |
4.1 农产品市场价格时间序列预测法介绍 | 第54-56页 |
4.1.1 平均数预测法 | 第54-55页 |
4.1.2 时间序列平均增长量预测法 | 第55页 |
4.1.3 时间序列几何平均法 | 第55页 |
4.1.4 移动平均市场预测法 | 第55-56页 |
4.2 时间序列预测法预测实践研究 | 第56-64页 |
4.2.1 平均数预测法预测 | 第56-59页 |
4.2.2 时间序列平均增长量预测法预测 | 第59-60页 |
4.2.3 时间序列平均发展速度市场预测法预测 | 第60-61页 |
4.2.4 移动平均市场预测法预测 | 第61-64页 |
第五章 农产品信息采集发布平台的分析和设计 | 第64-76页 |
5.1 系统需求分析 | 第64-66页 |
5.1.1 用户需求 | 第64-65页 |
5.1.2 数据需求 | 第65-66页 |
5.2 系统功能模块的划分 | 第66-68页 |
5.2.1 农产品信息采集模块 | 第66页 |
5.2.2 农产品信息查询、比对模块 | 第66-67页 |
5.2.3 农产品求购模块 | 第67页 |
5.2.4 登录、注册模块 | 第67-68页 |
5.2.5 管理模块 | 第68页 |
5.3 业务流程分析 | 第68-70页 |
5.4 数据库设计 | 第70-76页 |
第六章 农产品信息采集与发布系统的实现 | 第76-88页 |
6.1 农产品信息采集的实现 | 第76-84页 |
6.1.1 页面预处理 | 第76-77页 |
6.1.2 农产品种类信息采集 | 第77页 |
6.1.3 农产品名称和其对应URL信息采集 | 第77-80页 |
6.1.4 农产品市场价格信息 | 第80-83页 |
6.1.5 抓取最新的农产品市场价格信息 | 第83-84页 |
6.2 农产品价格行情查询结果显示界面 | 第84-85页 |
6.3 农产品求购详细信息界面 | 第85-86页 |
6.4 农产品比价和价格趋势显示界面 | 第86-88页 |
6.4.1 农产品比价结果显示界面 | 第86页 |
6.4.2 农产品价格走势结果显示界面 | 第86-88页 |
第七章 总结与展望 | 第88-90页 |
7.1 论文完成的主要工作及特色 | 第88-89页 |
7.1.1 论文主要工作 | 第88-89页 |
7.1.2 本文特色 | 第89页 |
7.2 对下一步工作的建议 | 第89-90页 |
参考文献 | 第90-94页 |
致谢 | 第94页 |