| 摘要 | 第5-7页 |
| ABSTRACT | 第7-9页 |
| 第一章 绪论 | 第14-24页 |
| 1.1 课题背景和研究意义 | 第14-16页 |
| 1.2 相关工作 | 第16-21页 |
| 1.2.1 概述 | 第16-17页 |
| 1.2.2 情感模型 | 第17-18页 |
| 1.2.3 基于面部图像的多特征提取 | 第18页 |
| 1.2.4 基于面部图像的表情识别 | 第18-19页 |
| 1.2.5 基于多种生理信号的情感识别 | 第19-20页 |
| 1.2.6 基于多模态信息的情感识别 | 第20-21页 |
| 1.3 本文的主要研究内容 | 第21-24页 |
| 第二章 基于面部图像特征级融合的表情识别 | 第24-42页 |
| 2.1 引言 | 第24页 |
| 2.2 面部表情图像的几何特征 | 第24-26页 |
| 2.3 面部表情图像的深度特征 | 第26-30页 |
| 2.3.1 卷积神经网络 | 第26-29页 |
| 2.3.2 深度特征提取框架 | 第29-30页 |
| 2.4 基于特征级融合的表情识别模型 | 第30-33页 |
| 2.4.1 特征级融合 | 第30-31页 |
| 2.4.2 基于支持向量机的多表情分类器 | 第31-32页 |
| 2.4.3 表情识别模型 | 第32-33页 |
| 2.4.4 表情识别模型的训练与测试 | 第33页 |
| 2.5 实验与分析 | 第33-41页 |
| 2.5.1 实验平台 | 第33-34页 |
| 2.5.2 实验数据 | 第34-37页 |
| 2.5.3 基于几何特征的表情识别 | 第37页 |
| 2.5.4 基于深度特征的表情识别 | 第37-38页 |
| 2.5.5 基于多特征的表情识别 | 第38-39页 |
| 2.5.6 实验结果分析 | 第39-41页 |
| 2.6 本章小结 | 第41-42页 |
| 第三章 基于面部图像模型级融合的表情识别 | 第42-58页 |
| 3.1 引言 | 第42页 |
| 3.2 面部图像的表情特征分组 | 第42-44页 |
| 3.2.1 面部结构分区 | 第42-43页 |
| 3.2.2 表情特征分组 | 第43-44页 |
| 3.3 权重确定方法 | 第44-45页 |
| 3.4 特征加权支持向量机 | 第45-50页 |
| 3.4.1 线性特征加权支持向量机 | 第46-47页 |
| 3.4.2 非线性特征加权支持向量机 | 第47-50页 |
| 3.5 基于加权核函数的表情识别模型 | 第50-51页 |
| 3.6 实验与分析 | 第51-56页 |
| 3.6.1 实验平台 | 第51页 |
| 3.6.2 实验数据 | 第51-52页 |
| 3.6.3 基于眉毛区域的表情识别 | 第52页 |
| 3.6.4 基于眼睛区域的表情识别 | 第52-53页 |
| 3.6.5 基于鼻子区域的表情识别 | 第53-54页 |
| 3.6.6 基于嘴部区域的表情识别 | 第54页 |
| 3.6.7 基于两种核函数的表情识别 | 第54-56页 |
| 3.7 本章小结 | 第56-58页 |
| 第四章 基于多种生理信号决策级融合的情感识别 | 第58-93页 |
| 4.1 引言 | 第58页 |
| 4.2 生理信号归一化处理 | 第58-59页 |
| 4.3 生理信号特征分析 | 第59-62页 |
| 4.3.1 时域分析 | 第59-61页 |
| 4.3.2 频域分析 | 第61-62页 |
| 4.4 脑电信号特征提取 | 第62-67页 |
| 4.4.1 脑电信号的预处理 | 第62-66页 |
| 4.4.2 脑电信号的特征提取与选择 | 第66-67页 |
| 4.5 心电信号特征提取 | 第67-72页 |
| 4.5.1 心电信号的预处理 | 第67-72页 |
| 4.5.2 心电信号的特征提取与选择 | 第72页 |
| 4.6 呼吸信号特征提取 | 第72-77页 |
| 4.6.1 呼吸信号的预处理 | 第73-76页 |
| 4.6.2 呼吸信号的特征提取与选择 | 第76-77页 |
| 4.7 皮肤电信号特征提取 | 第77-80页 |
| 4.7.1 皮肤电信号的预处理 | 第77-79页 |
| 4.7.2 皮肤电信号的特征提取与选择 | 第79-80页 |
| 4.8 基于决策级加权融合的情感识别模型 | 第80-83页 |
| 4.8.1 权重确定方法 | 第80-81页 |
| 4.8.2 决策级加权融合 | 第81-82页 |
| 4.8.3 情感识别模型 | 第82-83页 |
| 4.9 实验与分析 | 第83-91页 |
| 4.9.1 实验平台 | 第83-84页 |
| 4.9.2 实验数据 | 第84-86页 |
| 4.9.3 基于脑电信号的情感识别 | 第86页 |
| 4.9.4 基于心电信号的情感识别 | 第86-87页 |
| 4.9.5 基于呼吸信号的情感识别 | 第87页 |
| 4.9.6 基于皮肤电信号的情感识别 | 第87-88页 |
| 4.9.7 基于两种权重矩阵的情感识别 | 第88-90页 |
| 4.9.8 实验结果分析 | 第90-91页 |
| 4.10 本章小结 | 第91-93页 |
| 第五章 基于多模态信息特征级和决策级融合的情感识别 | 第93-110页 |
| 5.1 引言 | 第93页 |
| 5.2 视觉信号与情感相关背景知识 | 第93-97页 |
| 5.2.1 视觉信号的概念 | 第93-94页 |
| 5.2.2 视觉信号的特征提取 | 第94-97页 |
| 5.3 基于双级别融合的情感识别模型 | 第97-101页 |
| 5.3.1 特征级融合 | 第97页 |
| 5.3.2 权重确定方法 | 第97-98页 |
| 5.3.3 决策级加权融合 | 第98-100页 |
| 5.3.4 情感识别模型 | 第100-101页 |
| 5.4 实验与分析 | 第101-108页 |
| 5.4.1 实验平台 | 第101页 |
| 5.4.2 实验数据 | 第101-102页 |
| 5.4.3 基于视觉信号与脑电信号的情感识别 | 第102-103页 |
| 5.4.4 基于视觉信号与心电信号的情感识别 | 第103-104页 |
| 5.4.5 基于视觉信号与呼吸信号的情感识别 | 第104-105页 |
| 5.4.6 基于视觉信号与皮肤电信号的情感识别 | 第105-106页 |
| 5.4.7 基于多模态信号决策级加权的情感识别 | 第106-107页 |
| 5.4.8 实验结果与分析 | 第107-108页 |
| 5.5 本章小结 | 第108-110页 |
| 第六章 总结与展望 | 第110-113页 |
| 参考文献 | 第113-127页 |
| 致谢 | 第127-128页 |
| 攻读学位期间发表的学术论文目录 | 第128-129页 |