| 致谢 | 第1-6页 |
| 摘要 | 第6-8页 |
| Abstract | 第8-14页 |
| LIST OF FIGURES | 第14-16页 |
| LIST OF TABLES | 第16-17页 |
| Chapter 1 Introduction | 第17-33页 |
| ·Voice in Healthcare | 第18-20页 |
| ·Entering Patient Data | 第18-20页 |
| ·Web-based PACS or portals | 第20页 |
| ·Speech Recognition Framework | 第20-21页 |
| ·What is a Modality? | 第21-22页 |
| ·Literature Review of Related Research and Standards | 第22-28页 |
| ·Mobile interface | 第22-23页 |
| ·Multimodal interaction manager | 第23页 |
| ·Multimodal systems | 第23-25页 |
| ·Related Multimodal Architecture Standards and Recommendations | 第25-26页 |
| ·Comparison of multimodal approaches | 第26-28页 |
| ·More background of the problem | 第28页 |
| ·Significance or Rationale | 第28页 |
| ·Problem statement | 第28页 |
| ·Purpose and Objectives研究目标和主要工作 | 第28-29页 |
| ·Purpose | 第28-29页 |
| ·Objectives | 第29页 |
| ·Scope | 第29页 |
| ·Limitations | 第29页 |
| ·Assumptions | 第29-30页 |
| ·Hypothesis | 第30页 |
| ·Methodology | 第30-32页 |
| ·Methodology for system requirements specification | 第30-31页 |
| ·Methodology for Design and Implementation | 第31-32页 |
| ·Methodology for evaluating the results | 第32页 |
| ·Thesis structure | 第32-33页 |
| Chapter 2 Protocols and Standards | 第33-63页 |
| ·Standard bodies | 第33-34页 |
| ·W3C-World Wide Web Consortium | 第33页 |
| ·IETF-Internet Engineering Task Force | 第33页 |
| ·Other Standard bodies | 第33-34页 |
| ·W3C Multimodal Interaction MMI Architecture | 第34-38页 |
| ·The Runtime Framework | 第35-36页 |
| ·Modality Components | 第36页 |
| ·Life Cycle events | 第36-38页 |
| ·W3C Markup Languages | 第38-59页 |
| ·SCXML | 第38-43页 |
| ·VoiceXML | 第43-50页 |
| ·CCXML | 第50-56页 |
| ·EMMA | 第56-58页 |
| ·WAP and xHTML | 第58-59页 |
| ·IETF Protocols | 第59-61页 |
| ·MRCP | 第59页 |
| ·SIP | 第59-60页 |
| ·VoIP | 第60-61页 |
| ·3GPP ETSI Specifications | 第61页 |
| ·DSR | 第61页 |
| ·Open Mobile Alliance(OMA) | 第61-62页 |
| ·Integrating the Healthcare Enterprise(IHE) | 第62-63页 |
| Chapter 3 System Design and Implementation | 第63-106页 |
| ·High level System Overview | 第63-65页 |
| ·System clients | 第64页 |
| ·Speech framework | 第64页 |
| ·GUI Helper framework | 第64页 |
| ·SyncModality framework | 第64页 |
| ·Markup framework | 第64-65页 |
| ·System clients | 第65-68页 |
| ·The 3G Mobile Phone | 第65页 |
| ·Voice streaming interface prototypes | 第65-66页 |
| ·Web browser interface | 第66-67页 |
| ·Discussion | 第67-68页 |
| ·Speech framework | 第68-74页 |
| ·The IVR | 第68-70页 |
| ·The Cairo MRCPv2 Media server | 第70-71页 |
| ·The PBX | 第71-73页 |
| ·Discussion | 第73-74页 |
| ·GUI Helper framework | 第74-77页 |
| ·Web push server | 第74-77页 |
| ·Discussion | 第77页 |
| ·Markup framework | 第77-80页 |
| ·Web transform proxy | 第77-80页 |
| ·Discussion | 第80页 |
| ·SyncModality framework | 第80-81页 |
| ·Interaction manager | 第80-81页 |
| ·Discussion | 第81页 |
| ·Multimodal Data flow | 第81-101页 |
| ·Multimodal Interaction Overview | 第81-82页 |
| ·GUI modality component | 第82-90页 |
| ·Voice modality component | 第90-93页 |
| ·MMI Lifecycle events | 第93-94页 |
| ·Multimodal sessions | 第94-100页 |
| ·Discussion | 第100-101页 |
| ·Distributed Speech Recognition(DSR) | 第101-103页 |
| ·Coding the frontend | 第101页 |
| ·Transportation | 第101-102页 |
| ·Integration with the backend | 第102-103页 |
| ·Integration into a Medical Health System Environment | 第103-106页 |
| Chapter 4 Evaluation,discussion and limitations | 第106-109页 |
| ·Case Studies | 第106页 |
| ·Discussion | 第106-109页 |
| Chapter 5 Conclusion and Recommendations | 第109-111页 |
| ·Recommendations | 第110-111页 |
| References | 第111-116页 |
| Appendix A | 第116-119页 |
| Appendix B | 第119-123页 |
