服务机器人语音唇读人机交互技术研究
| 摘要 | 第1-5页 |
| ABSTRACT | 第5-11页 |
| 第1章 绪论 | 第11-21页 |
| ·课题来源与意义 | 第11-13页 |
| ·语音唇读人机交互技术发展现状 | 第13-17页 |
| ·国外语音唇读人机交互技术发展现状 | 第14-16页 |
| ·国内语音唇读人机交互技术发展现状 | 第16-17页 |
| ·语音唇读人机交互技术存在的问题 | 第17-18页 |
| ·本文研究内容及创新点 | 第18-21页 |
| ·本文研究内容 | 第18-19页 |
| ·论文创新点 | 第19-21页 |
| 第2章 人脸与ROI定位 | 第21-40页 |
| ·引言 | 第21页 |
| ·人脸与ROI定位技术现状分析 | 第21-23页 |
| ·肤色模型与分类 | 第23-29页 |
| ·颜色模型选择 | 第24-27页 |
| ·肤色检测法 | 第27-29页 |
| ·人脸与嘴唇定位算法 | 第29-36页 |
| ·色度坐标变换 | 第29-30页 |
| ·色度分布参数估计 | 第30-31页 |
| ·基于色度对比度的自适应嘴唇检测算法 | 第31-32页 |
| ·R/G唇色检测法 | 第32-34页 |
| ·人脸和嘴唇定位算法 | 第34-36页 |
| ·人脸和嘴唇定位算法实验 | 第36-39页 |
| ·人脸和嘴唇检测与定位实验结果 | 第36-38页 |
| ·色偏纠正 | 第38-39页 |
| ·本章小结 | 第39-40页 |
| 第3章 唇读特征提取 | 第40-70页 |
| ·引言 | 第40页 |
| ·唇读特征提取技术现状分析 | 第40-47页 |
| ·基于形状的唇读特征提取算法 | 第40-43页 |
| ·基于象素的唇读特征提取算法 | 第43-44页 |
| ·混合唇读特征提取算法 | 第44-47页 |
| ·特征预处理 | 第47-51页 |
| ·ROI选择 | 第47-49页 |
| ·ROI灰度归一化 | 第49-50页 |
| ·数据库 | 第50-51页 |
| ·基于象素法的唇读特征提取算法比较 | 第51-59页 |
| ·基于PCA的唇读特征提取 | 第51-54页 |
| ·基于DCT的唇读特征提取 | 第54-56页 |
| ·基于象素法的的唇读特征提取实验 | 第56-59页 |
| ·基于LDAO的唇读特征提取算法 | 第59-69页 |
| ·LDA算法原理 | 第59-60页 |
| ·LDAO算法原理 | 第60-63页 |
| ·LDAO算法训练与识别 | 第63-65页 |
| ·实验结果与分析 | 第65-69页 |
| ·本章小结 | 第69-70页 |
| 第4章 基于SVM的唇读识别 | 第70-86页 |
| ·引言 | 第70-71页 |
| ·SVM模型分类原理 | 第71-76页 |
| ·最优分类面 | 第71-74页 |
| ·支持向量机 | 第74-76页 |
| ·输入特征规整算法 | 第76-80页 |
| ·特征维数规整算法 | 第76-79页 |
| ·基于核的归整算法 | 第79-80页 |
| ·基于SVM的唇读识别实验 | 第80-85页 |
| ·特征规整算法性能比较实验 | 第82-83页 |
| ·不同唇读特征提取算法对SVM识别性能比较 | 第83-84页 |
| ·SVM与HMM识别性能比较实验 | 第84-85页 |
| ·本章小结 | 第85-86页 |
| 第5章 基于耦合HMM的语音唇读触合 | 第86-105页 |
| ·引言 | 第86-87页 |
| ·HMM原理 | 第87-93页 |
| ·HMM的数学模型 | 第88页 |
| ·HMM中的3个关键问题及解决方案 | 第88-93页 |
| ·CHMM结构 | 第93-95页 |
| ·双流HMM | 第93-94页 |
| ·CHMM结构 | 第94-95页 |
| ·CHMM算法实现 | 第95-99页 |
| ·CHMM模型化简 | 第95-97页 |
| ·CHMM结构等效变换 | 第97-99页 |
| ·语音唇读融合实验 | 第99-104页 |
| ·语音唇读双模态数据库 | 第99页 |
| ·语音特征提取 | 第99-101页 |
| ·语音唇读融合实验 | 第101-104页 |
| ·本章小结 | 第104-105页 |
| 第6章 语音唇读人机交互系统设计 | 第105-120页 |
| ·引言 | 第105页 |
| ·语音唇读人机交互系统的设计方案 | 第105-108页 |
| ·语音唇读人机交互系统硬件设计 | 第108-112页 |
| ·SPCE061A单片机硬件结构体系 | 第108-109页 |
| ·音频处理模块 | 第109-110页 |
| ·通讯模块 | 第110-111页 |
| ·电机驱动模块 | 第111页 |
| ·图像输入设备 | 第111-112页 |
| ·语音唇读人机交互系统软件设计 | 第112-116页 |
| ·上位PC机单模态唇读识别软件设计 | 第112-114页 |
| ·上位PC机语音识别软件设计 | 第114-115页 |
| ·下位单片机语音识别程序和控制程序设计 | 第115-116页 |
| ·通讯程序设计 | 第116页 |
| ·语音唇读人机交互系统性能测试 | 第116-119页 |
| ·实时语音识别实验 | 第117-118页 |
| ·实时唇读识别实验 | 第118-119页 |
| ·本章小结 | 第119-120页 |
| 第7章 结论与展望 | 第120-123页 |
| ·研究工作总结 | 第120-121页 |
| ·今后工作展望 | 第121-123页 |
| 致谢 | 第123-124页 |
| 参考文献 | 第124-132页 |
| 攻读学位期间的研究成果 | 第132页 |