| 摘要 | 第1-6页 |
| ABSTRACT | 第6-7页 |
| 致谢 | 第7-12页 |
| 第一章 绪论 | 第12-23页 |
| ·无线传感器网络概述 | 第12-16页 |
| ·无线传感器网络结构和特点 | 第12-14页 |
| ·无线传感器网络协议栈和关键技术 | 第14-16页 |
| ·无线传感器网络传输策略 | 第16-18页 |
| ·无线传感器网络传输控制概述 | 第16-17页 |
| ·无线传感器网络传输控制研究现状 | 第17-18页 |
| ·强化学习 | 第18-21页 |
| ·强化学习概述 | 第18-20页 |
| ·强化学习主要算法 | 第20-21页 |
| ·论文组织结构 | 第21-23页 |
| 第二章 基本的数学模型和优化算法 | 第23-32页 |
| ·MARKOV 决策过程 | 第23-26页 |
| ·Markov 决策过程概述 | 第23-24页 |
| ·Markov 决策过程数学模型 | 第24-26页 |
| ·Q 学习 | 第26-28页 |
| ·Q 学习原理 | 第26-27页 |
| ·基于性能势的 Q 学习 | 第27-28页 |
| ·部分可观MARKOV 决策过程和相关算法 | 第28-31页 |
| ·POMDP 数学模型 | 第28-29页 |
| ·相关算法 | 第29-31页 |
| ·本章小结 | 第31-32页 |
| 第三章 基于MDP 模型能量高效的传输机制 | 第32-46页 |
| ·基于缓冲区和信道状态的传输问题 | 第32-36页 |
| ·问题描述 | 第32-34页 |
| ·有限状态Markov 信道模型 | 第34-36页 |
| ·基于缓冲区和信道状态的传输问题的MDP 模型 | 第36-40页 |
| ·问题的数学模型描述 | 第36-39页 |
| ·Q 学习优化算法 | 第39-40页 |
| ·实验结果 | 第40-45页 |
| ·本章小结 | 第45-46页 |
| 第四章 基于POMDP 模型的传输机制 | 第46-55页 |
| ·基于部分可观信道状态信息的传输问题描述 | 第46-48页 |
| ·基于部分可观信道状态信息的传输问题 POMDP 模型 | 第48-51页 |
| ·数学模型描述 | 第48-50页 |
| ·信念状态更新 | 第50页 |
| ·Linear-Q 学习算法 | 第50-51页 |
| ·实验仿真 | 第51-54页 |
| ·本章小结 | 第54-55页 |
| 第五章 总结 | 第55-56页 |
| 参考文献 | 第56-61页 |
| 攻读硕士学位期间主要科研工作和成果 | 第61-62页 |