| 摘要 | 第1-5页 |
| ABSTRACT | 第5-7页 |
| 1 引言 | 第7-14页 |
| ·研究背景及意义 | 第7-9页 |
| ·国内外研究现状 | 第9-12页 |
| ·主要研究内容 | 第12页 |
| ·本文结构 | 第12-14页 |
| 2 分布式多媒体爬行系统设计 | 第14-30页 |
| ·网络爬虫基本原理 | 第14-16页 |
| ·网络爬虫设计目标 | 第16-17页 |
| ·分布式网络爬虫架构设计 | 第17-22页 |
| ·任务调度与负载均衡 | 第22-29页 |
| ·本章小结 | 第29-30页 |
| 3 网络爬虫关键技术研究与实现 | 第30-41页 |
| ·爬行策略 | 第30-33页 |
| ·URL 判重 | 第33-37页 |
| ·多线程同步 | 第37-39页 |
| ·更新策略 | 第39-40页 |
| ·本章小结 | 第40-41页 |
| 4 多媒体抓取模块实现与系统评测 | 第41-52页 |
| ·普通多媒体资源获取 | 第41-44页 |
| ·视频分享网站地址解析 | 第44-48页 |
| ·系统运行评测 | 第48-51页 |
| ·本章小结 | 第51-52页 |
| 5 总结与展望 | 第52-53页 |
| 致谢 | 第53-54页 |
| 参考文献 | 第54-59页 |
| 附录 攻读学位期间的研究成果与参研项目 | 第59页 |