百度图片分布式索引建库服务平台的设计与实现
摘要 | 第4-5页 |
Abstract | 第5页 |
第1章 绪论 | 第9-13页 |
1.1 课题来源及研究意义 | 第9页 |
1.2 与课题相关的国内外研究状况 | 第9-12页 |
1.2.1 国外建库平台现状 | 第9-10页 |
1.2.2 国内建库平台现状 | 第10-12页 |
1.3 本论文的主要工作内容 | 第12-13页 |
第2章 建库服务平台需求与关键技术分析 | 第13-26页 |
2.1 索引建库业务流程分析 | 第13-14页 |
2.2 系统功能性需求分析 | 第14-18页 |
2.2.1 主控模块功能需求 | 第15-17页 |
2.2.2 分布式下载模块功能需求 | 第17页 |
2.2.3 页面分析模块功能需求 | 第17页 |
2.2.4 切词正排模块功能需求 | 第17-18页 |
2.2.5 建库收尾模块功能需求 | 第18页 |
2.3 系统非功能性需求分析 | 第18-20页 |
2.3.1 性能需求 | 第18-19页 |
2.3.2 可扩展性需求 | 第19页 |
2.3.3 其他非功能性需求 | 第19-20页 |
2.4 关键技术及分析 | 第20-25页 |
2.4.1 分布式存储与计算 | 第20-22页 |
2.4.2 多线程网络编程 | 第22-25页 |
2.5 本章小结 | 第25-26页 |
第3章 建库服务平台系统设计 | 第26-47页 |
3.1 服务平台架构设计 | 第26-27页 |
3.2 服务平台功能模块设计 | 第27-43页 |
3.2.1 主控模块设计 | 第29-31页 |
3.2.2 分布式下载模块设计 | 第31-33页 |
3.2.3 页面分析模块设计 | 第33-36页 |
3.2.4 切词与正排模块设计 | 第36-39页 |
3.2.5 倒排及归并模块的设计 | 第39-42页 |
3.2.6 建库收尾模块的设计 | 第42-43页 |
3.3 服务平台接口设计 | 第43-46页 |
3.4 本章小结 | 第46-47页 |
第4章 建库服务平台系统实现 | 第47-63页 |
4.1 主控模块实现 | 第47-51页 |
4.1.1 建库请求监听的实现 | 第47-48页 |
4.1.2 建库环境初始化的实现 | 第48-49页 |
4.1.3 子模块通信启动的实现 | 第49-51页 |
4.2 分布式下载模块实现 | 第51-53页 |
4.2.1 主控通信功能的实现 | 第51-52页 |
4.2.2 百灵数据下载的实现 | 第52-53页 |
4.3 页面分析模块实现 | 第53-57页 |
4.3.1 页面分析的实现 | 第53-55页 |
4.3.2 建库数据更新的实现 | 第55-57页 |
4.4 切词正排模块实现 | 第57-59页 |
4.5 倒排及归并模块实现 | 第59-61页 |
4.5.1 倒排索引的实现 | 第59-61页 |
4.5.2 索引归并的实现 | 第61页 |
4.6 建库收尾模块的实现 | 第61-62页 |
4.7 本章小结 | 第62-63页 |
第5章 建库服务平台测试与分析 | 第63-72页 |
5.1 测试数据及环境 | 第63-64页 |
5.1.1 测试准备 | 第63页 |
5.1.2 测试环境 | 第63-64页 |
5.2 单元测试 | 第64-66页 |
5.2.1 接口测试 | 第64页 |
5.2.2 边界条件测试 | 第64-66页 |
5.3 集成测试 | 第66-67页 |
5.4 性能测试与分析 | 第67-71页 |
5.4.1 性能测试 | 第67-70页 |
5.4.2 结果分析 | 第70-71页 |
5.5 本章小结 | 第71-72页 |
结论 | 第72-73页 |
参考文献 | 第73-77页 |
致谢 | 第77-78页 |
个人简历 | 第78页 |