统计与规则相结合的中文分词模型设计与实现
摘要 | 第1-7页 |
Abstract | 第7-12页 |
第1章 绪论 | 第12-16页 |
·课题研究背景及意义 | 第12-13页 |
·国内外研究现状分析 | 第13-14页 |
·论文主要内容与章节安排 | 第14-16页 |
第2章 中文分词技术及相关统计模型理论基础 | 第16-29页 |
·中文分词技术 | 第16-18页 |
·基于字符串匹配的分词方法 | 第16-17页 |
·基于理解的分词方法 | 第17页 |
·基于统计的分词方法 | 第17-18页 |
·中文分词两大难点 | 第18-24页 |
·歧义识别 | 第18-22页 |
·未登录词识别 | 第22-24页 |
·统计模型理论基础 | 第24-28页 |
·N-gram统计模型 | 第24-25页 |
·基于统计的N-最短路径粗分模型 | 第25-26页 |
·隐马尔可夫模型(HMM) | 第26-27页 |
·Viterbi算法 | 第27-28页 |
·本章小结 | 第28-29页 |
第3章 分词系统总体框架设计与实现 | 第29-46页 |
·分词系统总体框架 | 第29-30页 |
·词典结构 | 第30-31页 |
·初切分模块的设计与实现 | 第31-38页 |
·分词前预处理 | 第31页 |
·原子切分 | 第31-33页 |
·全切分 | 第33-35页 |
·权值计算 | 第35-37页 |
·基于统计的N-最短路径初切分 | 第37-38页 |
·未登录词识别 | 第38-42页 |
·时间词和数字词识别 | 第38-39页 |
·基于角色的人名识别 | 第39-42页 |
·基于角色的地名识别 | 第42页 |
·基于类的隐马分词 | 第42-44页 |
·基于ATN和基于类的隐马词性标注 | 第44-45页 |
·本章小结 | 第45-46页 |
第4章 基于统计的N-最短路径与ATN综合排歧 | 第46-58页 |
·扩充转换网络理论基础 | 第46-49页 |
·有限状态转换网络(FTN) | 第46-47页 |
·递归状态转换网络(RTN) | 第47页 |
·扩充状态转换网络(ATN) | 第47-49页 |
·扩充转换网络设计 | 第49-55页 |
·名词短语(NP)网络文法设计 | 第49-51页 |
·动宾短语(VP)网络文法设计 | 第51页 |
·介词短语(PP)网络文法设计 | 第51-52页 |
·简单句型(SS)网络文法设计 | 第52-54页 |
·弧与寄存器 | 第54-55页 |
·ATN算法描述 | 第55-56页 |
·基于统计的N-最短路径与ATN综合排歧 | 第56-57页 |
·本章小结 | 第57-58页 |
第5章 实验及结果分析 | 第58-68页 |
·实验评测指标 | 第58页 |
·实验描述 | 第58-59页 |
·实验过程 | 第59-67页 |
·歧义切分实验 | 第59-64页 |
·不同领域语料测试 | 第64页 |
·对比实验 | 第64-67页 |
·实验结果分析 | 第67页 |
·本章小结 | 第67-68页 |
结论与未来的工作 | 第68-70页 |
致谢 | 第70-71页 |
参考文献 | 第71-75页 |
附录 | 第75-83页 |
攻读硕士学位期间发表的论文 | 第83页 |