摘要 | 第5-6页 |
Abstract | 第6-7页 |
目录 | 第8-11页 |
第1章 绪论 | 第11-15页 |
1.1 研究背景及问题提出 | 第11-12页 |
1.2 国内外研究现状 | 第12-13页 |
1.3 本文主要工作 | 第13-14页 |
1.4 本文组织结构 | 第14-15页 |
第2章 相关技术概述 | 第15-31页 |
2.1 全文检索技术 | 第15-20页 |
2.1.1 全文检索的核心技术 | 第15-16页 |
2.1.2 全文检索系统 | 第16-17页 |
2.1.3 Lucene介绍 | 第17-20页 |
2.2 MapReduce编程模型 | 第20-23页 |
2.2.1 MapReduce的编程模型 | 第21页 |
2.2.2 MapReduce的典型应用 | 第21-22页 |
2.2.3 MapReduce模型的实现方法 | 第22-23页 |
2.3 Hadoop平台架构 | 第23-26页 |
2.3.1 Hadoop平台简介 | 第24页 |
2.3.2 Hadoop分布式文件系统HDFS | 第24-25页 |
2.3.3 Hadoop分布式计算模型MapReduce | 第25-26页 |
2.4 分布式检索技术 | 第26-29页 |
2.4.1 分布式计算 | 第26页 |
2.4.2 分布式检索 | 第26-27页 |
2.4.3 Katta原理分析 | 第27-29页 |
2.5 本章小结 | 第29-31页 |
第3章 分布式索引与检索系统的设计 | 第31-43页 |
3.1 系统功能说明 | 第31-33页 |
3.1.1 系统功能 | 第31-32页 |
3.1.2 与其他系统的关系 | 第32-33页 |
3.2 分布式索引与检索系统的体系结构 | 第33-34页 |
3.3 并行索引模块设计 | 第34-37页 |
3.3.1 并行索引模块的输入和输出 | 第34-36页 |
3.3.2 并行索引模块的流程 | 第36-37页 |
3.4 分布式检索模块设计 | 第37-40页 |
3.4.1 结构化数据检索 | 第37-38页 |
3.4.2 非结构化数据检索 | 第38-40页 |
3.5 前台展示模块设计 | 第40-42页 |
3.5.1 界面设计 | 第40-41页 |
3.5.2 结构化数据展示设计 | 第41-42页 |
3.5.3 非结构化数据展示设计 | 第42页 |
3.6 本章小结 | 第42-43页 |
第4章 分布式索引与检索系统的实现 | 第43-61页 |
4.1 索引的并行创建及发布 | 第43-49页 |
4.1.1 使用Lucene建立索引的一般步骤 | 第43-44页 |
4.1.2 MapReduce建立索引 | 第44-49页 |
4.1.3 索引更新 | 第49页 |
4.2 分布式检索模块实现 | 第49-58页 |
4.2.1 结构化数据检索模块实现 | 第50-53页 |
4.2.2 网页数据检索模块的实现 | 第53-58页 |
4.3 前台展示实现 | 第58-59页 |
4.3.1 结构化数据展示 | 第58页 |
4.3.2 网页数据展示 | 第58-59页 |
4.4 本章小结 | 第59-61页 |
第5章 分布式索引与检索系统的部署与测试 | 第61-71页 |
5.1 系统部署 | 第61-62页 |
5.1.1 软硬件环境 | 第61-62页 |
5.1.2 系统部署方案 | 第62页 |
5.2 系统测试 | 第62-69页 |
5.2.1 并行索引模块测试 | 第63-64页 |
5.2.2 分布式检索模块测试及对比 | 第64-69页 |
5.2.3 测试总结 | 第69页 |
5.3 本章小结 | 第69-71页 |
第6章 结束语 | 第71-73页 |
6.1 工作总结 | 第71-72页 |
6.2 展望 | 第72-73页 |
参考文献 | 第73-77页 |
致谢 | 第77-79页 |
攻硕期间发表的论文及参加的项目 | 第79页 |