| 致谢 | 第5-6页 |
| 摘要 | 第6-7页 |
| ABSTRACT | 第7页 |
| 1 引言 | 第10-15页 |
| 1.1 研究背景及意义 | 第10-12页 |
| 1.1.1 研究背景 | 第10-11页 |
| 1.1.2 研究意义 | 第11-12页 |
| 1.2 研究现状与目的 | 第12-13页 |
| 1.3 研究内容 | 第13-15页 |
| 2 传统新词发现研究方法 | 第15-33页 |
| 2.1 基于规则的研究方法 | 第15-17页 |
| 2.1.1 规则抽取方法 | 第15-16页 |
| 2.1.2 规则过滤方法 | 第16-17页 |
| 2.2 基于统计模型的研究方法 | 第17-27页 |
| 2.2.1 条件随机场(CRF)模型 | 第17-21页 |
| 2.2.2 支持向量机(SVM)模型 | 第21-27页 |
| 2.3 规则和统计融合的研究方法 | 第27-31页 |
| 2.4 本章小结 | 第31-33页 |
| 3 二阶段规则和统计融合的微博新词发现方法 | 第33-51页 |
| 3.1 语料预处理 | 第33-34页 |
| 3.2 微博新词构词规则的设计 | 第34-37页 |
| 3.3 改进的C/NC-VALUE方法 | 第37-43页 |
| 3.3.1 统计量的引入 | 第38-40页 |
| 3.3.2 融合统计量的改进C/NC-value方法设计 | 第40-42页 |
| 3.3.3 后处理规则设计 | 第42-43页 |
| 3.4 与统计模型的融合 | 第43-49页 |
| 3.4.1 与条件随机场(CRF)的融合 | 第43-47页 |
| 3.4.2 与支持向量机(SVM)的融合 | 第47-49页 |
| 3.5 本章小结 | 第49-51页 |
| 4 实验 | 第51-63页 |
| 4.1 新词发现实验 | 第51-59页 |
| 4.1.1 实验语料 | 第51页 |
| 4.1.2 实验工具 | 第51-52页 |
| 4.1.3 评价方法 | 第52页 |
| 4.1.4 参数和阈值设定 | 第52-54页 |
| 4.1.5 新词发现实验结果与分析 | 第54-59页 |
| 4.2 微博分词标注实验测试 | 第59-62页 |
| 4.2.1 实验语料 | 第59页 |
| 4.2.2 评价方法 | 第59-60页 |
| 4.2.3 实验结果及分析 | 第60-62页 |
| 4.3 本章小结 | 第62-63页 |
| 5 总结与展望 | 第63-65页 |
| 5.1 总结 | 第63页 |
| 5.2 展望 | 第63-65页 |
| 参考文献 | 第65-68页 |
| 作者简历及攻读硕士学位期间取得的研究成果 | 第68-70页 |
| 学位论文数据集 | 第70页 |