基于主题爬虫的高校精品课程网络资讯微平台的设计与研究
| 摘要 | 第5-6页 |
| ABSTRACT | 第6-7页 |
| 第1章 绪论 | 第10-14页 |
| 1.1 研究背景和意义 | 第10页 |
| 1.2 发展现状与趋势 | 第10-12页 |
| 1.3 研究内容 | 第12-13页 |
| 1.4 论文组织结构 | 第13-14页 |
| 第2章 理论基础 | 第14-23页 |
| 2.1 系统架构技术 | 第14-16页 |
| 2.1.1 微平台 | 第14-15页 |
| 2.1.2 腾讯云服务 | 第15-16页 |
| 2.2 网络爬虫 | 第16-18页 |
| 2.2.1 主题网络爬虫 | 第16页 |
| 2.2.2 爬虫的工作原理 | 第16-17页 |
| 2.2.3 Scrapy爬虫框架 | 第17-18页 |
| 2.3 网页分类与数据挖掘 | 第18-23页 |
| 2.3.1 网页分类基本步骤 | 第19页 |
| 2.3.2 中文分词和TF-IDF | 第19-20页 |
| 2.3.3 贝叶斯分类 | 第20-22页 |
| 2.3.4 余弦相似性 | 第22-23页 |
| 第3章 系统需求分析 | 第23-28页 |
| 3.1 系统功能需求 | 第23-24页 |
| 3.2 搜索功能需求 | 第24-25页 |
| 3.3 数据需求 | 第25页 |
| 3.4 性能需求 | 第25-27页 |
| 3.5 安全需求 | 第27-28页 |
| 第4章 系统设计与研究 | 第28-58页 |
| 4.1 总体框架设计 | 第28-37页 |
| 4.1.1 系统设计原则 | 第28页 |
| 4.1.2 概要设计 | 第28-29页 |
| 4.1.3 安全性设计 | 第29-31页 |
| 4.1.4 功能模块设计 | 第31-34页 |
| 4.1.5 Python服务器架构 | 第34-35页 |
| 4.1.6 文件服务器架构 | 第35页 |
| 4.1.7 数据库服务器架构 | 第35-37页 |
| 4.2 主题爬虫系统设计 | 第37-53页 |
| 4.2.1 搜索引擎框架设计 | 第37-38页 |
| 4.2.2 主题爬虫框架设计 | 第38-41页 |
| 4.2.3 数据爬取与处理 | 第41-45页 |
| 4.2.4 结构化信息抽取 | 第45-47页 |
| 4.2.5 网页分类 | 第47-50页 |
| 4.2.6 信息检索优化设计 | 第50-53页 |
| 4.3 数据库设计 | 第53-58页 |
| 4.3.1 数据库概念结构设计 | 第53-54页 |
| 4.3.2 数据库逻辑结构设计 | 第54-55页 |
| 4.3.3 数据库物理结构设计 | 第55-58页 |
| 第5章 系统功能实现 | 第58-73页 |
| 5.1 平台开发环境搭建 | 第58-60页 |
| 5.1.1 微信公众平台接入 | 第59页 |
| 5.1.2 使用SDK调用API | 第59-60页 |
| 5.2 主题爬虫系统 | 第60-65页 |
| 5.2.1 爬虫管理 | 第60-62页 |
| 5.2.2 任务管理 | 第62-65页 |
| 5.3 课程资讯微平台 | 第65-73页 |
| 5.3.1 菜单设置 | 第65-66页 |
| 5.3.2 关联小程序 | 第66-68页 |
| 5.3.3 功能展示 | 第68-71页 |
| 5.3.4 用户管理 | 第71-73页 |
| 第6章 总结与展望 | 第73-75页 |
| 6.1 总结 | 第73页 |
| 6.2 展望 | 第73-75页 |
| 参考文献 | 第75-78页 |
| 致谢 | 第78页 |
