基于CRFs的中文分词算法研究与实现
| 摘要 | 第1-6页 |
| ABSTRACT | 第6-10页 |
| 第1章 引言 | 第10-14页 |
| ·研究背景和意义 | 第10页 |
| ·分词研究现状 | 第10-12页 |
| ·论文的主要工作 | 第12页 |
| ·论文组织 | 第12-14页 |
| 第2章 条件随机场理论 | 第14-42页 |
| ·隐马尔可夫模型 | 第14-25页 |
| ·离散马尔可夫过程 | 第14-15页 |
| ·隐马尔可夫要素 | 第15-16页 |
| ·隐马尔可夫模型的三个基本问题 | 第16-24页 |
| ·隐马尔可夫模型的局限性 | 第24-25页 |
| ·最大熵模型 | 第25-30页 |
| ·最大熵模型约束条件 | 第27页 |
| ·最大熵模型的原则 | 第27-30页 |
| ·最大熵马尔可夫模型 | 第30-32页 |
| ·最大熵马尔可夫模型的概率形式 | 第30-31页 |
| ·标记偏置问题 | 第31-32页 |
| ·条件随机场理论 | 第32-41页 |
| ·条件随机场定义 | 第33页 |
| ·势函数 | 第33-35页 |
| ·条件随机场分布模型 | 第35-37页 |
| ·条件随机场模型参数估计 | 第37-39页 |
| ·条件概率的矩阵计算 | 第39-41页 |
| ·本章小结 | 第41-42页 |
| 第3章 基本CRFs的算法优化与改进 | 第42-64页 |
| ·CRF++ | 第42-43页 |
| ·观察序列对象及其优化 | 第43-47页 |
| ·CRF++的观察序列对象 | 第44-45页 |
| ·优化的观察序列对象 | 第45-47页 |
| ·实验结果与分析 | 第47页 |
| ·Viterbi算法的改进 | 第47-51页 |
| ·Viterbi算法 | 第47-48页 |
| ·Viterbi算法引入规则策略 | 第48-49页 |
| ·Viterbi算法引入基于阀值的路径剪枝策略 | 第49-50页 |
| ·实验结果与分析 | 第50-51页 |
| ·双数组算法的改进 | 第51-62页 |
| ·双数组的构造与查询 | 第52-53页 |
| ·双数组的优化 | 第53-57页 |
| ·用优化的算法构造字典 | 第57-61页 |
| ·实验结果与分析 | 第61-62页 |
| ·本章小结 | 第62-64页 |
| 第4章 基于CRFs的中文分词系统的实现 | 第64-78页 |
| ·全文检索项目 | 第64-65页 |
| ·中文分词系统组成 | 第65-66页 |
| ·模块间的关系图 | 第66-67页 |
| ·训练和测试过程 | 第67-69页 |
| ·模块功能与算法描述 | 第69-73页 |
| ·实验设计、结果及分析 | 第73-77页 |
| ·实验语料与评价指标 | 第73-74页 |
| ·特征模板选择 | 第74-75页 |
| ·实验设计 | 第75页 |
| ·与基于规则、HMMs方法的比较 | 第75-76页 |
| ·实验结果与分析 | 第76-77页 |
| ·本章小结 | 第77-78页 |
| 第5章 总结与展望 | 第78-80页 |
| ·本文总结 | 第78-79页 |
| ·未来工作 | 第79-80页 |
| 参考文献 | 第80-82页 |
| 致谢 | 第82-83页 |
| 攻读学位期间发表的学术论文目录 | 第83页 |
