摘要 | 第1-5页 |
Abstract | 第5-9页 |
第1章 绪论 | 第9-16页 |
·研究背景 | 第9-10页 |
·搜索引擎工作原理 | 第10-13页 |
·主题搜索引擎的特点 | 第11-12页 |
·个性化搜索引擎的特点 | 第12-13页 |
·国内外研究现状 | 第13-14页 |
·论文主要研究内容 | 第14页 |
·论文章节安排 | 第14-16页 |
第2章 网络爬虫Heirtrix技术分析 | 第16-23页 |
·网络爬虫简介 | 第16-17页 |
·Heritrix系统架构 | 第17-20页 |
·Heritrix系统简介 | 第17页 |
·Heritrix结构分析 | 第17-20页 |
·扩展和改进Heritrix | 第20-21页 |
·解析汽车网站的解析器Extractor | 第20页 |
·扩展FrontierScheduler抓取汽车网页信息 | 第20-21页 |
·定制Queue-assignment-policy实现多线程抓取 | 第21页 |
·Heritrix优缺点分析 | 第21-22页 |
·本章小结 | 第22-23页 |
第3章 检索框架Lucene的分析研究 | 第23-32页 |
·Lucene概述 | 第23-25页 |
·全文检索的基本原理 | 第23-24页 |
·Lucene工作流程 | 第24-25页 |
·Lucene索引技术 | 第25-27页 |
·Lucene倒排索引技术 | 第25-26页 |
·Lucene索引结构 | 第26-27页 |
·Lucene排序技术 | 第27-31页 |
·信息检索的排序技术 | 第27-28页 |
·Lucene排序技术 | 第28-29页 |
·Lucene排序算法的改进 | 第29-31页 |
·本章小结 | 第31-32页 |
第4章 系统设计与实现 | 第32-54页 |
·购车者的需求 | 第32页 |
·系统总体架构 | 第32-34页 |
·汽车主题爬虫模块设计 | 第34-40页 |
·定制抓取汽车网页的爬虫程序 | 第34-38页 |
·多线程抓取汽车网页 | 第38-40页 |
·汽车网页信息抽取模块设计 | 第40-44页 |
·使用HTMLParser高效提取网页内容 | 第40-42页 |
·信息抽取模块设计 | 第42-44页 |
·索引模块设计 | 第44-50页 |
·数据库与汽车索引结构 | 第44-45页 |
·创建汽车产品索引 | 第45-47页 |
·加入自定义的词库 | 第47-49页 |
·获取用户的个性化需求信息 | 第49-50页 |
·用户查询模块设计 | 第50-53页 |
·本章小结 | 第53-54页 |
第5章 系统测试 | 第54-62页 |
·系统演示 | 第54-58页 |
·网络爬虫测试 | 第58-61页 |
·改进前后网络爬虫测试 | 第58-60页 |
·改进后的爬虫不同条件下测试 | 第60-61页 |
·本章小结 | 第61-62页 |
第6章 总结与展望 | 第62-64页 |
参考文献 | 第64-67页 |
致谢 | 第67-68页 |
攻读硕士学位期间发表的论文 | 第68页 |