| 摘要 | 第4-7页 |
| ABSTRACT | 第7-10页 |
| 第一章 绪论 | 第13-27页 |
| 1.1 研究意义 | 第13-15页 |
| 1.2 研究现状 | 第15-23页 |
| 1.2.1 Massive MIMO波束赋形技术 | 第15-17页 |
| 1.2.2 马尔可夫决策过程与强化学习理论 | 第17-20页 |
| 1.2.3 基于RL与MDP的无线调度理论 | 第20-23页 |
| 1.3 内容安排 | 第23-27页 |
| 第二章 Massive MIMO复合型波束赋形传输技术 | 第27-39页 |
| 2.1 研究目的 | 第27页 |
| 2.2 Massive MIMO波束赋形系统模型 | 第27-34页 |
| 2.2.1 Massive MIMO信道建模 | 第28-30页 |
| 2.2.2 Massive MIMO波束赋形信号建模 | 第30-31页 |
| 2.2.3 Massive MIMO波束赋形的渐进特性 | 第31-33页 |
| 2.2.4 零空间干扰消除技术 | 第33-34页 |
| 2.3 仿真结果 | 第34-38页 |
| 2.4 小结 | 第38-39页 |
| 第三章 基于强化学习的Massive MIMO波束赋形技术 | 第39-71页 |
| 3.1 研究目的 | 第39页 |
| 3.2 基于RL的Massive MIMO波束赋形系统模型 | 第39-46页 |
| 3.2.1 信号模型 | 第39-40页 |
| 3.2.2 平均回报准则下的抽象调度问题 | 第40-43页 |
| 3.2.3 波束赋形调度问题的等价性 | 第43-45页 |
| 3.2.4 Multicast波束赋形调度问题 | 第45-46页 |
| 3.3 Massive MIMO波束赋形问题的渐进分析 | 第46-53页 |
| 3.3.1 RL子问题建模 | 第46-48页 |
| 3.3.2 部分观测的RL问题及子问题的策略估计 | 第48-51页 |
| 3.3.3 基于策略梯度定理的RL算法 | 第51-53页 |
| 3.4 考虑物理层安全的Massive MIMO波束赋形技术 | 第53-59页 |
| 3.4.1 信号模型 | 第53-56页 |
| 3.4.2 基于RL的物理层安全问题及其子问题 | 第56-59页 |
| 3.5 仿真结果 | 第59-69页 |
| 3.6 小结 | 第69-71页 |
| 第四章 Massive MIMO波束赋形系统的用户调度技术 | 第71-97页 |
| 4.1 研究目的 | 第71页 |
| 4.2 Massive MIMO用户调度模型 | 第71-81页 |
| 4.2.1 信号模型 | 第71-73页 |
| 4.2.2 移动性建模 | 第73-75页 |
| 4.2.3 基于MDP的Massive MIMO用户调度问题 | 第75-77页 |
| 4.2.4 考虑异构系统的用户调度问题 | 第77-81页 |
| 4.3 对称MARL理论 | 第81-87页 |
| 4.3.1 对称MARL问题及其定义 | 第82-84页 |
| 4.3.2 强对称MARL的策略估计误差 | 第84-87页 |
| 4.4 基于对称MARL的用户调度问题 | 第87-89页 |
| 4.4.1 MARL子问题建模 | 第87-88页 |
| 4.4.2 基于Q-Learning的用户调度算法 | 第88-89页 |
| 4.5 仿真结果 | 第89-95页 |
| 4.5.1 MARL子问题策略误差仿真结果 | 第89-91页 |
| 4.5.2 Q-Learning算法仿真结果 | 第91-95页 |
| 4.6 小结 | 第95-97页 |
| 第五章 总结与展望 | 第97-99页 |
| 参考文献 | 第99-109页 |
| 致谢 | 第109-111页 |
| 攻读学位期间发表的学术论文目录 | 第111页 |
