基于Scrapy的电子商务网络测量与网络特征分析
| 致谢 | 第1-6页 |
| 中文摘要 | 第6-7页 |
| ABSTRACT | 第7-11页 |
| 1 引言 | 第11-19页 |
| ·研究背景 | 第11-13页 |
| ·研究现状 | 第13-15页 |
| ·研究意义 | 第15-16页 |
| ·论文主要工作及结构安排 | 第16-19页 |
| 2 电子商务网络测量中的抽样算法研究 | 第19-27页 |
| ·常见抽样算法简介 | 第19-20页 |
| ·MHRW算法在二分图上的推广 | 第20-22页 |
| ·算法推广的理论基础 | 第20-21页 |
| ·算法实现的适应性修改 | 第21-22页 |
| ·MHRW算法抽样结果测试 | 第22-26页 |
| ·关于抽样比的讨论 | 第22-23页 |
| ·合成图抽样性能 | 第23-25页 |
| ·实际网络数据抽样性能 | 第25-26页 |
| ·本章小结 | 第26-27页 |
| 3 淘宝网数据爬取技术和爬取策略 | 第27-48页 |
| ·爬虫技术简介 | 第27-29页 |
| ·本文采用数据抓取技术 | 第29-34页 |
| ·Scrapy基本原理 | 第29-30页 |
| ·功能模块定制 | 第30-34页 |
| ·测量中的问题及解决方法 | 第34-42页 |
| ·网页动态数据提取问题 | 第34-37页 |
| ·存储问题 | 第37页 |
| ·下一页链接提取问题 | 第37-38页 |
| ·MHRW抽样算法应用问题 | 第38-41页 |
| ·测量频率限制问题 | 第41页 |
| ·连续抓取的安全性问题 | 第41-42页 |
| ·大规模数据抓取策略 | 第42-43页 |
| ·抓取策略思路 | 第42页 |
| ·数据规模分析 | 第42-43页 |
| ·数据集描述 | 第43-47页 |
| ·据结构描述 | 第43-45页 |
| ·所得数据集描述 | 第45-47页 |
| ·本章小结 | 第47-48页 |
| 4 宝网用户行为特征分析 | 第48-66页 |
| ·淘宝网体系结构简介 | 第48-50页 |
| ·淘宝网中卖家特征的分析 | 第50-51页 |
| ·淘宝分享网络特征分析 | 第51-60页 |
| ·淘宝分享网络拓扑特征分析 | 第52-54页 |
| ·分享平台与卖家属性相关分析 | 第54-57页 |
| ·分享平台中两类节点分享效果分析 | 第57-60页 |
| ·买家网络特征分析 | 第60-64页 |
| ·买家网络拓扑特征分析 | 第60-62页 |
| ·买家团参数分析 | 第62-63页 |
| ·买家团后续分享行为变化趋势 | 第63-64页 |
| ·本章小结 | 第64-66页 |
| 5 结论与展望 | 第66-68页 |
| ·全文总结 | 第66-67页 |
| ·未来展望 | 第67-68页 |
| 参考文献 | 第68-70页 |
| 作者简历 | 第70-72页 |
| 学位论文数据集 | 第72页 |
