政府服务直通车上基于主题模型的信件分类管理
摘要 | 第3-5页 |
Abstract | 第5-6页 |
第一章 绪论 | 第9-17页 |
1.1 选课背景及意义 | 第9-11页 |
1.2 相关知识点研究现状 | 第11-14页 |
1.2.1 文本自动分类技术的研究现状 | 第11-12页 |
1.2.1.1 文本自动分类总体研究 | 第11-12页 |
1.2.1.2 中文文本分类研究现状 | 第12页 |
1.2.2 主题模型的研究现状 | 第12-14页 |
1.3 文本挖掘概述 | 第14-15页 |
1.4 本文的主要内容与结构 | 第15-16页 |
1.5 本章小结 | 第16-17页 |
第二章 文本分类相关知识 | 第17-30页 |
2.1 文本分类概述 | 第17-18页 |
2.2 文本预处理 | 第18-21页 |
2.2.1 词干提取 | 第18-19页 |
2.2.2 去停用词 | 第19页 |
2.2.3 中文分词 | 第19-20页 |
2.2.4 词性标注 | 第20-21页 |
2.3 文本表示 | 第21-25页 |
2.3.1 文档—词项矩阵 | 第21页 |
2.3.2 倒排索引结构 | 第21-22页 |
2.3.3 向量空间模型 | 第22-25页 |
2.3.3.1 TF-IDF权重计算 | 第23-24页 |
2.3.3.2 余弦相似度计算 | 第24-25页 |
2.3.3.3 空间向量模型表示信件文本的不适性 | 第25页 |
2.3.4 概率模型 | 第25页 |
2.4 特征选择 | 第25-27页 |
2.4.1 文档频率 | 第26-27页 |
2.4.2 卡方统计量(χ~2) | 第27页 |
2.5 分类算法概述 | 第27-29页 |
2.5.1 朴素贝叶斯分类算法 | 第27-28页 |
2.5.2 k最邻近分类算法 | 第28-29页 |
2.6 本章小结 | 第29-30页 |
第三章 主题模型 | 第30-47页 |
3.1 主题模型概述 | 第30-31页 |
3.1.1 主题的介绍 | 第30-31页 |
3.1.2 主题模型简介 | 第31页 |
3.2 隐性语义索引 | 第31-32页 |
3.3 概率隐性语义索引 | 第32-34页 |
3.4 LDA主题模型 | 第34-37页 |
3.4.1 LDA模型表示 | 第34-35页 |
3.4.2 LDA生成文档的过程 | 第35-36页 |
3.4.3 LDA主题模型的训练与推断 | 第36-37页 |
3.5 空间向量模型和主题模型的比较 | 第37-38页 |
3.6 基于LDA模型的信件分类实验 | 第38-46页 |
3.6.1 实验流程 | 第38-39页 |
3.6.2 实验环境及结果评价指标 | 第39页 |
3.6.3 实验数据集 | 第39-40页 |
3.6.4 预处理 | 第40-41页 |
3.6.4.1 一般预处理 | 第40-41页 |
3.6.4.2 空格处理程序 | 第41页 |
3.6.5 JGibbLDA | 第41-43页 |
3.6.5.1 参数介绍 | 第41-42页 |
3.6.5.2 JGibbLDA的输入与输出 | 第42-43页 |
3.6.6 WEKA 3.6的使用 | 第43-44页 |
3.6.7 实验结果 | 第44-46页 |
3.7 本章小结 | 第46-47页 |
第四章 BTM主题模型与信件分类管理的实现 | 第47-66页 |
4.1 概述 | 第47页 |
4.2 BTM主题模型 | 第47-51页 |
4.2.1 BTM主题模型的简介 | 第48页 |
4.2.2 BTM主题模型表示 | 第48-50页 |
4.2.3 BTM的参数估计 | 第50-51页 |
4.4 基于BTM模型建模的信件分类实验 | 第51-55页 |
4.4.1 实验流程 | 第51页 |
4.4.2 BTM模型的预处理 | 第51-52页 |
4.4.3 BTM模型的输入与输出 | 第52-53页 |
4.4.4 实验结果 | 第53-55页 |
4.5 二级词表处理方法 | 第55-60页 |
4.5.1 一般预处理及其不适性 | 第55-56页 |
4.5.2 二级词表处理方法 | 第56-60页 |
4.6 BTM建模结合二级词表处理技术的实验 | 第60-64页 |
4.6.1 实验流程 | 第60-62页 |
4.6.2 二级词表处理过程 | 第62页 |
4.6.3 实验结果 | 第62-64页 |
4.7 本章小节 | 第64-66页 |
第五章 总结与展望 | 第66-69页 |
5.1 工作总结 | 第66页 |
5.2 笔者的收获 | 第66-67页 |
5.3 研究展望 | 第67-69页 |
参考文献 | 第69-73页 |
致谢 | 第73页 |