摘要 | 第6-8页 |
Abstract | 第8-9页 |
第1章 绪论 | 第13-21页 |
1.1 论文的研究背景及意义 | 第13-14页 |
1.2 国内外研究现状 | 第14-19页 |
1.2.1 大规模网络数据采集 | 第14-15页 |
1.2.2 Web信息抽取 | 第15-17页 |
1.2.3 RDF数据存储与查询技术 | 第17-18页 |
1.2.4 实体对齐相关研究 | 第18-19页 |
1.3 本文的研究内容及结构安排 | 第19-21页 |
1.3.1 本文的研究内容 | 第19页 |
1.3.2 论文的结构安排 | 第19-21页 |
第2章 相关技术研究 | 第21-27页 |
2.1 RDF简介 | 第21-22页 |
2.2 SPARQL简介 | 第22-23页 |
2.3 开源爬取框架Scrapy | 第23-25页 |
2.3.1 Scrapy介绍 | 第23-24页 |
2.3.2 优缺点分析 | 第24-25页 |
2.4 NoSQL数据库MongoDB | 第25页 |
2.5 图数据库介绍 | 第25-26页 |
2.6 本章小结 | 第26-27页 |
第3章 网络百科数据采集技术 | 第27-41页 |
3.1 数据源采集方法与问题分析 | 第27-28页 |
3.1.1 数据源选择依据 | 第27页 |
3.1.2 采集数据源格式 | 第27-28页 |
3.1.3 数据源爬取方法分析 | 第28页 |
3.2 问题与挑战 | 第28-30页 |
3.2.1 大规模网络百科数据的高速采集 | 第28-29页 |
3.2.2 百科网站对爬虫的速率限制与反爬取约束 | 第29-30页 |
3.3 网络百科数据高速采集系统的设计与实现 | 第30-33页 |
3.3.1 网络百科实体数据高速采集框架 | 第30-31页 |
3.3.2 网络百科数据采集系统实现 | 第31-33页 |
3.4 代理IP自动获取技术的设计与实现 | 第33-39页 |
3.4.1 自动抽取XPath表达式算法 | 第33-34页 |
3.4.2 算法步骤 | 第34-37页 |
3.4.3 代理IP验证 | 第37-39页 |
3.5 实验结果与分析 | 第39-40页 |
3.5.1 数据集介绍 | 第39页 |
3.5.2 实验结果 | 第39-40页 |
3.6 本章小结 | 第40-41页 |
第4章 实体信息的RDF转化、存储与查询 | 第41-56页 |
4.1 实体数据分析 | 第41-43页 |
4.1.1 百科网页信息抽取内容 | 第41-42页 |
4.1.2 结构化数据进行RDF转化 | 第42-43页 |
4.2 问题与挑战 | 第43-44页 |
4.2.1 网络百科实体信息抽取与数据的RDF转化 | 第43页 |
4.2.2 大规模RDF数据的存储与查询 | 第43-44页 |
4.3 实体信息抽取与RDF转化 | 第44-48页 |
4.3.1 实体信息抽取 | 第44-47页 |
4.3.2 实体数据RDF转化 | 第47-48页 |
4.4 RDF数据存储与查询 | 第48-53页 |
4.4.1 整体框架 | 第48-49页 |
4.4.2 关键技术设计与实现 | 第49-53页 |
4.5 实验结果与分析 | 第53-55页 |
4.5.1 实验环境 | 第53-54页 |
4.5.2 实验数据集介绍 | 第54页 |
4.5.3 结果与分析 | 第54-55页 |
4.6 本章小结 | 第55-56页 |
第5章 异构数据源实体对齐 | 第56-66页 |
5.1 引言 | 第56页 |
5.2 实体对齐框架 | 第56-58页 |
5.3 实体上下文建模 | 第58-59页 |
5.3.1 LDA产生上下文过程 | 第58页 |
5.3.2 主题特征生成过程 | 第58-59页 |
5.4 基于LCS的属性相似度计算 | 第59-60页 |
5.4.1 网络百科实体的属性信息的相关定义 | 第59-60页 |
5.4.2 属性相似度计算 | 第60页 |
5.5 基于主题特征的相似度计算方法 | 第60-61页 |
5.6 基于主题特征的实体对齐算法 | 第61-62页 |
5.7 实验与结果分析 | 第62-65页 |
5.7.1 实验数据集描述 | 第62页 |
5.7.2 实验结果分析 | 第62-65页 |
5.8 本章小结 | 第65-66页 |
第6章 中文RDF知识库构建系统 | 第66-73页 |
6.1 系统结构介绍 | 第66页 |
6.2 系统主要功能与界面 | 第66-72页 |
6.2.1 网络百科数据采集 | 第66-69页 |
6.2.2 实体信息抽取与RDF规范化 | 第69-71页 |
6.2.3 RDF数据查询 | 第71-72页 |
6.3 本章小结 | 第72-73页 |
结论 | 第73-75页 |
本文工作总结 | 第73页 |
未来工作展望 | 第73-75页 |
致谢 | 第75-76页 |
参考文献 | 第76-81页 |
攻读硕士学位期间发表的论文及科研成果 | 第81页 |