面向人机交互的姿态信息与语音信息关系研究
| 中文摘要 | 第1-4页 |
| ABSTRACT | 第4-7页 |
| 第一章 绪论 | 第7-12页 |
| ·课题选题的意义和目的 | 第7-8页 |
| ·国内外研究成果介绍 | 第8-12页 |
| 第二章 姿态与言语产生的理论与模型 | 第12-16页 |
| 第三章 语料与标注系统 | 第16-32页 |
| ·语料 | 第16页 |
| ·语言学信息标注 | 第16-21页 |
| ·音段、韵律标注和副语言学信息标注 | 第16-19页 |
| ·言语行为、话语标记以及话轮的功能标注 | 第19-20页 |
| ·言语信息标注层级与示例 | 第20-21页 |
| ·多模态标注系统 | 第21-27页 |
| ·手部动作标注 | 第22-23页 |
| ·头部动作标注 | 第23-24页 |
| ·身体动作标注 | 第24页 |
| ·眼部动作标注 | 第24-25页 |
| ·面部表情标注 | 第25页 |
| ·嘴巴动作标注 | 第25页 |
| ·各模态之间关系的标注 | 第25-27页 |
| ·姿态标注示例 | 第27-32页 |
| ·标注软件简介 | 第27页 |
| ·标注模型和接口 | 第27-32页 |
| 第四章 姿态与语音信息在语言理解中关系 | 第32-36页 |
| ·实验设计 | 第32页 |
| ·听辨实验 | 第32页 |
| ·统计结果 | 第32-33页 |
| ·分析和结论 | 第33-36页 |
| 第五章 姿态表达方式与语音的关系 | 第36-49页 |
| ·重音与手部动作的相关性分析 | 第36-42页 |
| ·数据提取 | 第36-37页 |
| ·数据分析 | 第37-42页 |
| ·头部动作和手部动作互补关系分析 | 第42-44页 |
| ·数据提取 | 第42页 |
| ·数据分析 | 第42-44页 |
| ·边界与手部动作的相关性分析 | 第44-49页 |
| ·语调短语边界与手部动作的相关性分析 | 第45-46页 |
| ·次要韵律短语边界与手部动作的相关性分析 | 第46-47页 |
| ·韵律词边界与手部动作的相关性分析 | 第47-48页 |
| ·结论 | 第48-49页 |
| 第六章 总结与展望 | 第49-50页 |
| 参考文献 | 第50-54页 |
| 发表论文和科研情况说明 | 第54-55页 |
| 致谢 | 第55页 |
