| 第1章 引言 | 第9-16页 |
| 1.1 通信网络QoS概述 | 第9-12页 |
| 1.2 通信网络控制 | 第12-15页 |
| 1.3 论文主要工作 | 第15-16页 |
| 第2章 马尔可夫决策过程和再励学习 | 第16-29页 |
| 2.1 马尔可夫决策过程简介 | 第16-21页 |
| 2.1.1 动态规划(Dynamic Programming)法 | 第16-19页 |
| 2.1.2 线性规划(Linear Programming)法 | 第19页 |
| 2.1.3 MDP的近似解法 | 第19-21页 |
| 2.2 再励学习 | 第21-24页 |
| 2.3 马尔可夫决策过程及再励学习在通信网络控制中的应用 | 第24-29页 |
| 2.3.1 接纳控制 | 第24-26页 |
| 2.3.2 流量控制和拥塞控制 | 第26页 |
| 2.3.3 路由 | 第26-27页 |
| 2.3.4 调度 | 第27页 |
| 2.3.5 越区切换和信道分配 | 第27页 |
| 2.3.6 功率控制 | 第27-29页 |
| 第3章 基于测量的动态接纳控制策略 | 第29-44页 |
| 3.1 引言 | 第29-32页 |
| 3.1.1 接纳控制概述 | 第29-31页 |
| 3.1.2 动态接纳控制 | 第31-32页 |
| 3.2 问题模型 | 第32-33页 |
| 3.3 基于测量的动态接纳控制算法MBDAC | 第33-40页 |
| 3.3.1 状态空间的构建 | 第33-34页 |
| 3.3.2 基于Q-Learnig的接纳控制算法 | 第34-36页 |
| 3.3.3 丢包率计算 | 第36-37页 |
| 3.3.4 自适应的状态空间分割算法 | 第37-39页 |
| 3.3.5 基于测量的动态接纳控制 | 第39-40页 |
| 3.4 仿真结果及讨论 | 第40-42页 |
| 3.5 本章小结 | 第42-44页 |
| 第4章 基于再励学习的主动队列管理算法 | 第44-61页 |
| 4.1 主动队列管理概述 | 第44-48页 |
| 4.2 RLGD算法 | 第48-52页 |
| 4.3 仿真结果及讨论 | 第52-59页 |
| 实验1 | 第53-55页 |
| 实验2 | 第55-56页 |
| 实验3 | 第56-57页 |
| 实验4 | 第57-58页 |
| 实验5 | 第58-59页 |
| 4.4 本章小结 | 第59-61页 |
| 第5章 移动Ad-hoc网络中的分布式功率控制 | 第61-75页 |
| 5.1 移动Ad-hoc网络 | 第61-62页 |
| 5.2 Ad-hoc网络中的功率控制 | 第62-65页 |
| 5.3 分布式功率控制算法 | 第65-69页 |
| 5.3.1 IEEE 802.11 标准 | 第65-66页 |
| 5.3.2 分布式的功率控制 | 第66-67页 |
| 5.3.3 RTS/CTS握手机制的改进 | 第67-68页 |
| 5.3.4 最优发射功率的计算 | 第68-69页 |
| 5.3.5 算法总结 | 第69页 |
| 5.4 仿真结果 | 第69-74页 |
| 5.5 本章小结 | 第74-75页 |
| 第6章 队列容量初步研究 | 第75-83页 |
| 6.1 研究背景 | 第75-78页 |
| 6.2 问题模型 | 第78-79页 |
| 6.3 队列容量 | 第79-81页 |
| 6.4 一个特例--M/M/1队列的容量 | 第81-82页 |
| 6.5 本章小结 | 第82-83页 |
| 第7章 总结 | 第83-86页 |
| 参考文献 | 第86-90页 |
| 致谢、声明 | 第90-91页 |
| 个人简历、在学期间的研究成果及发表的学术论文 | 第91页 |
