摘要 | 第5-7页 |
Abstract | 第7-8页 |
第一章 绪论 | 第13-25页 |
1.1 研究意义 | 第13-14页 |
1.2 国内外研究现状及发展动态分析 | 第14-21页 |
1.2.1 音乐情感模型 | 第14-15页 |
1.2.2 音乐情感识别 | 第15-17页 |
1.2.3 音乐可视化 | 第17-18页 |
1.2.4 触觉与触觉音乐 | 第18-20页 |
1.2.5 多感知模式交互音乐感知实验 | 第20-21页 |
1.3 论文的研究目标与研究的主要内容 | 第21-22页 |
1.3.1 研究目标 | 第21页 |
1.3.2 研究的主要内容 | 第21-22页 |
1.4 论文的组织结构与章节安排 | 第22-25页 |
第二章 音乐情感的特征表示 | 第25-39页 |
2.1 音乐特征集合 | 第25页 |
2.2 实例歌曲的选择 | 第25-27页 |
2.3 能量特征 | 第27-30页 |
2.3.1 功率 | 第27-28页 |
2.3.2 响度 | 第28-30页 |
2.4 节奏特征 | 第30-31页 |
2.5 时域特征 | 第31-32页 |
2.5.1 过零率 | 第31-32页 |
2.5.2 激励/起音时间 | 第32页 |
2.6 频谱特征 | 第32-35页 |
2.6.1 频谱质心 | 第33-34页 |
2.6.2 频谱滚降 | 第34-35页 |
2.6.3 其他的指标 | 第35页 |
2.7 和声特征 | 第35-36页 |
2.8 基于小波系数直方图的音乐特征 | 第36-37页 |
2.9 本章小结 | 第37-39页 |
第三章 音乐情感回归与分类 | 第39-67页 |
3.1 音乐情感识别基础 | 第39-43页 |
3.1.1 效价-激励情感模型 | 第39-40页 |
3.1.2 音乐情感主观评分 | 第40-41页 |
3.1.3 计算机音乐情感识别 | 第41-42页 |
3.1.4 音乐情感数据库介绍 | 第42-43页 |
3.2 音乐信号预处理和特征提取 | 第43-47页 |
3.2.1 音乐信号分帧与加窗 | 第43-44页 |
3.2.2 特征提取 | 第44-45页 |
3.2.3 主成分分析特征空间投影 | 第45页 |
3.2.4 Relief特征选择 | 第45-47页 |
3.3 音乐情感回归 | 第47-56页 |
3.3.1 音乐情感回归模型训练与预测方案 | 第47-48页 |
3.3.2 回归模型 | 第48-49页 |
3.3.3 回归算法 | 第49-53页 |
3.3.3.1 多元自适应回归样条法 | 第49-50页 |
3.3.3.2 支持向量回归 | 第50-51页 |
3.3.3.3 径向基函数回归 | 第51-52页 |
3.3.3.4 其他回归算法 | 第52-53页 |
3.3.4 音乐情感回归实验结果 | 第53-56页 |
3.4 音乐情感分类 | 第56-66页 |
3.4.1 分类模型 | 第56-57页 |
3.4.2 分类算法 | 第57-63页 |
3.4.2.1 支持向量机分类 | 第57-58页 |
3.4.2.2 K邻域分类 | 第58-59页 |
3.4.2.3 模糊神经网络分类 | 第59-61页 |
3.4.2.4 其他分类算法 | 第61-62页 |
3.4.2.5 混合分类器 | 第62-63页 |
3.4.3 音乐情感分类实验结果分析 | 第63-66页 |
3.5 本章小结 | 第66-67页 |
第四章 热触觉实验装置与感知实验研究 | 第67-101页 |
4.1 触觉显示与复现研究现状 | 第67-69页 |
4.1.1 触觉的概述 | 第67页 |
4.1.2 触觉显示与复现装置 | 第67-69页 |
4.2 手指热触觉感知机理 | 第69-71页 |
4.3 基于嵌入式技术和PID控制的单热源热触觉感知与复现实验装置 | 第71-72页 |
4.4 基于虚拟仪器技术和模糊PID控制的热触觉感知与复现实验装置 | 第72-79页 |
4.4.1 系统硬件设计方案 | 第72-74页 |
4.4.2 系统软件设计方案 | 第74-78页 |
4.4.3 实验结果 | 第78-79页 |
4.5 多热源热触觉感知与复现实验装置 | 第79-82页 |
4.5.1 系统设计方案 | 第79-80页 |
4.5.2 系统的硬件电路设计 | 第80-82页 |
4.6 热触觉感知特性的生理—心理物理实验 | 第82-87页 |
4.6.1 手指热触觉感知特性实验 | 第82-84页 |
4.6.2 手指热触觉差别阈限测量实验 | 第84-87页 |
4.7 热触觉与情感识别实验 | 第87-93页 |
4.7.1 情感与温度的映射实验 | 第88-91页 |
4.7.2 基于不同温度线索的热触觉激励情感识别实验 | 第91-93页 |
4.8 基于热触觉的虚拟环境材质识别实验 | 第93-99页 |
4.8.1 实际热触觉手指皮肤温度变化 | 第94-97页 |
4.8.2 虚拟环境材质识别实验 | 第97-99页 |
4.8.2.1 基于热触觉的虚拟物材质识别实验过程规范 | 第97页 |
4.8.2.2 虚拟物的材质识别实验过程与结果 | 第97-99页 |
4.9 本章小结 | 第99-101页 |
第五章 多模式交互音乐感知实验研究 | 第101-135页 |
5.1 可视音乐感知实验系统的设计 | 第101-104页 |
5.1.1 系统开发前后端构建 | 第101页 |
5.1.2 系统的设计方案 | 第101-103页 |
5.1.3 系统界面与功能参数 | 第103-104页 |
5.2 不同情感的可视音乐表现形式 | 第104-114页 |
5.2.1 研究被试 | 第105页 |
5.2.2 歌曲选择 | 第105页 |
5.2.3 调查问卷的设计 | 第105-107页 |
5.2.4 实验程序与数据统计 | 第107-108页 |
5.2.5 实验数据分析与结果 | 第108-114页 |
5.2.5.1 平静的可视音乐体验实验数据分析与结果 | 第108-109页 |
5.2.5.2 欢快的可视音乐体验实验数据分析与结果 | 第109-111页 |
5.2.5.3 愤怒的可视音乐体验实验数据分析与结果 | 第111-113页 |
5.2.5.4 悲伤的可视音乐体验实验数据分析与结果 | 第113-114页 |
5.3 基于听觉与视觉的可视音乐感知实验 | 第114-119页 |
5.3.1 实验目的 | 第114页 |
5.3.2 实验设计 | 第114-115页 |
5.3.3 研究被试 | 第115页 |
5.3.4 实验材料 | 第115页 |
5.3.5 实验程序 | 第115-116页 |
5.3.6 实验结果 | 第116-119页 |
5.3.6.1 主体间效应 | 第116页 |
5.3.6.2 主体内效应 | 第116-117页 |
5.3.6.3 描述统计 | 第117-119页 |
5.4 基于听觉与热触觉的音乐感知实验 | 第119-123页 |
5.4.1 实验目的 | 第119页 |
5.4.2 实验设计与研究被试 | 第119-120页 |
5.4.3 实验材料 | 第120页 |
5.4.4 实验程序 | 第120页 |
5.4.5 实验结果 | 第120-123页 |
5.4.5.1 主体间效应 | 第120-121页 |
5.4.5.2 主体内效应 | 第121-122页 |
5.4.5.3 描述统计 | 第122-123页 |
5.5 基于听视触觉的多模式交互音乐感知实验 | 第123-132页 |
5.5.1 实验目的 | 第123页 |
5.5.2 实验设计 | 第123-124页 |
5.5.3 研究被试 | 第124页 |
5.5.4 实验材料 | 第124-125页 |
5.5.5 实验程序 | 第125-126页 |
5.5.6 实验结果 | 第126-132页 |
5.5.6.1 主体间效应 | 第126-127页 |
5.5.6.2 简单效应检验结果 | 第127-129页 |
5.5.6.3 描述统计 | 第129-132页 |
5.6 本章小结 | 第132-135页 |
第六章 总结和展望 | 第135-141页 |
6.1 总结 | 第135-137页 |
6.2 研究取得的进展与创新点 | 第137-138页 |
6.3 展望 | 第138-141页 |
致谢 | 第141-143页 |
参考文献 | 第143-157页 |
攻读博士学位期间的学术成果 | 第157-159页 |
附录 | 第159-163页 |
附录一 音乐有代表性的尺度标准 | 第159-161页 |
附录二 音乐信号特征提取集合(548维) | 第161-163页 |