| 摘要 | 第4-5页 |
| ABSTRACT | 第5-6页 |
| 1 引言 | 第8-12页 |
| 2 马尔科夫控制过程的研究史 | 第12-16页 |
| 3 离散时间马尔科夫控制过程 | 第16-20页 |
| 3.1 离散时间马尔科夫控制过程 | 第16-17页 |
| 3.2 马氏策略 | 第17-18页 |
| 3.2.1 策略 | 第17页 |
| 3.2.2 马氏策略 | 第17-18页 |
| 3.3 马氏性和马氏链的基本特性 | 第18页 |
| 3.3.1 马氏性 | 第18页 |
| 3.3.2 马氏链的基本特性 | 第18页 |
| 3.4 平均费用最优准则 | 第18-20页 |
| 4 最优方程的解 | 第20-40页 |
| 4.1 基本假设条件与最优方程 | 第20-23页 |
| 4.2 相对值函数及其基本性质 | 第23-25页 |
| 4.3 相对值函数的一般性质 | 第25-30页 |
| 4.4 相对值函数的特殊性质 | 第30-35页 |
| 4.5 最优方程解的存在性证明 | 第35-38页 |
| 4.6 尝试性探索 | 第38-40页 |
| 参考文献 | 第40-44页 |
| 致谢 | 第44-46页 |