基于词典的中文分词歧义算法研究
摘要 | 第1-5页 |
ABSTRACT | 第5-8页 |
第一章 绪论 | 第8-11页 |
·中文分词的研究意义 | 第8页 |
·中文分词的研究背景 | 第8-9页 |
·中文分词的研究现状 | 第9页 |
·本文的主要研究内容及论文结构 | 第9-11页 |
第二章 中文分词相关算法 | 第11-18页 |
·中文分词算法概述 | 第11-13页 |
·基于词典的分词算法 | 第11-12页 |
·基于统计的分词算法 | 第12-13页 |
·基于规则的分词算法 | 第13页 |
·分词中的词典机制 | 第13-16页 |
·基于Trie 树的词典机制 | 第14页 |
·基于PATRICIA tree 的词典机制 | 第14-15页 |
·基于整词二分的词典机制 | 第15页 |
·双层hash 的词典机制 | 第15-16页 |
·中文分词面临的主要困难 | 第16页 |
·性能评价指标 | 第16-18页 |
第三章 分词歧义相关技术 | 第18-25页 |
·歧义产生的原因 | 第18-19页 |
·歧义字段的分类 | 第19-20页 |
·交集型歧义 | 第19页 |
·组合型歧义 | 第19页 |
·真歧义 | 第19-20页 |
·歧义的发现 | 第20-22页 |
·双向最大匹配检索法 | 第20页 |
·逐词扫描的最大匹配法 | 第20-21页 |
·最长词次长词发现法 | 第21页 |
·正向最大匹配+回退一字法 | 第21-22页 |
·分词歧义消解算法介绍 | 第22-24页 |
·规则型歧义消解算法 | 第22-23页 |
·词概率法歧义消解算法 | 第23页 |
·t-信息算法 | 第23-24页 |
·歧义处理困难 | 第24-25页 |
第四章 中文分词系统总体设计及实现 | 第25-38页 |
·预处理模块 | 第26-28页 |
·分词词典加载模块 | 第26-28页 |
·词频词典模块 | 第28页 |
·分词模块 | 第28-30页 |
·歧义发现模块 | 第30-31页 |
·歧义消解模块 | 第31-34页 |
·首字消解子模块 | 第32-33页 |
·词频消解子模块 | 第33页 |
·计算词频消解子模块 | 第33-34页 |
·系统实现及结果分析 | 第34-38页 |
·实验说明 | 第34页 |
·实验结果比较 | 第34-36页 |
·结果分析 | 第36-38页 |
第五章 结束语 | 第38-40页 |
参考文献 | 第40-42页 |
致谢 | 第42-43页 |
在学期间公开发表论文及著作情况 | 第43页 |