基于带词长和规则判定的中文分词技术的研究
摘要 | 第1-4页 |
ABSTRACT | 第4-6页 |
目录 | 第6-8页 |
1、绪论 | 第8-13页 |
·研究背景和研究意义 | 第8-9页 |
·研究现状 | 第9-10页 |
·本文的主要研究内容 | 第10-11页 |
·本文的组织结构 | 第11-13页 |
2、对中文分词中的相关技术的研究 | 第13-31页 |
·中文分词的主要分词算法 | 第13-22页 |
·基于字符串匹配的分词算法 | 第13-17页 |
·基于词典的分词算法 | 第17页 |
·基于统计的分词算法 | 第17-20页 |
·基于规则的分词算法 | 第20-21页 |
·基于理解的分词算法 | 第21页 |
·基于语义的分词方法 | 第21-22页 |
·对中文分词词典机制的研究 | 第22-28页 |
·基于整词二分的中文分词词典机制 | 第22-24页 |
·基于TRIE索引树的中文分词词典机制 | 第24-25页 |
·基于逐字二分的中文分词词典机制 | 第25-26页 |
·基于哈希算法的中文分词词典机制 | 第26-27页 |
·四种中文分词词典机制的性能比较 | 第27-28页 |
·中文分词需要解决的关键问题 | 第28-29页 |
·分词结果中歧义的识别 | 第28-29页 |
·未登录词的识别 | 第29页 |
·中文分词的性能指标 | 第29-30页 |
·本章小结 | 第30-31页 |
3、带词长的中文分词算法 | 第31-38页 |
·现有的哈希词典机制 | 第31-33页 |
·基于哈希的中文分词词典机制 | 第31-32页 |
·多级哈希词典机制 | 第32-33页 |
·带词长的中文分词算法 | 第33-37页 |
·本章小结 | 第37-38页 |
4、对切分歧义的处理 | 第38-47页 |
·产生歧义的原因 | 第38-39页 |
·切分歧义的分类 | 第39-40页 |
·如何检索交集型歧义 | 第40-43页 |
·双向最大匹配检索法 | 第40-41页 |
·逐词扫描的最大匹配法 | 第41-42页 |
·最长词次长词发现法 | 第42-43页 |
·歧义字段的消解 | 第43-46页 |
·概率统计型歧义消解算法 | 第43-44页 |
·基于规则的歧义消解算法 | 第44页 |
·改进的歧义消解算法 | 第44-46页 |
·本章小结 | 第46-47页 |
5 中文分词系统的设计 | 第47-62页 |
·中文分词系统的设计原则 | 第47-48页 |
·中文分词系统的设计 | 第48-59页 |
·预处理模块的实现 | 第50-52页 |
·中文分词算法的实现 | 第52-55页 |
·歧义消解算法的实现 | 第55-59页 |
·实验分析 | 第59-61页 |
·本章小结 | 第61-62页 |
6. 总结和展望 | 第62-64页 |
参考文献 | 第64-68页 |
致谢 | 第68-69页 |
攻读学位期间发表的学术论文目录 | 第69-70页 |