| 摘要 | 第1-6页 |
| ABSTRACT | 第6-11页 |
| 第一章 绪论 | 第11-21页 |
| ·研究背景及意义 | 第11-12页 |
| ·国内外研究现状 | 第12-18页 |
| ·交通控制发展现状 | 第12-14页 |
| ·自适应信号控制研究现状 | 第14-15页 |
| ·典型的交通控制系统 | 第15-18页 |
| ·研究目的 | 第18-19页 |
| ·主要内容 | 第19-20页 |
| ·研究技术路线 | 第20-21页 |
| 第二章 Q 学习算法原理简介 | 第21-33页 |
| ·Q 学习算法基本理论 | 第21-29页 |
| ·强化学习基本原理 | 第21-22页 |
| ·强化学习的马尔可夫决策过程 | 第22-24页 |
| ·Q 学习算法步骤 | 第24-25页 |
| ·期望回报函数 | 第25-26页 |
| ·状态-动作对的 Q 值函数 | 第26-27页 |
| ·动作选择机制 | 第27-28页 |
| ·Q 值更新函数 | 第28-29页 |
| ·强化学习的其他主要算法 | 第29-32页 |
| ·动态规划算法 | 第29页 |
| ·蒙特卡罗算法 | 第29-30页 |
| ·瞬时差分学习算法 | 第30-31页 |
| ·SARSA 学习算法 | 第31页 |
| ·Dyna 学习算法 | 第31页 |
| ·AHC 学习算法 | 第31-32页 |
| ·小结 | 第32-33页 |
| 第三章 基于 Q 学习理论的绿灯时间优化模型 | 第33-51页 |
| ·概述 | 第33页 |
| ·离线 Q 学习绿时优化模型的构建 | 第33-35页 |
| ·数值实验环境 | 第35-36页 |
| ·定周期等饱和度离线 Q 学习绿时优化模型 | 第36-40页 |
| ·定周期等饱和度离线 Q 学习优化 | 第36-37页 |
| ·定周期等饱和度优化结果在线应用 | 第37-40页 |
| ·变周期等饱和度离线 Q 学习绿时优化模型 | 第40-43页 |
| ·变周期等饱和度离线 Q 学习优化 | 第40-41页 |
| ·变周期等饱和度优化结果在线应用 | 第41-43页 |
| ·定周期延误最小离线 Q 学习绿时优化模型 | 第43-46页 |
| ·定周期延误最小离线 Q 离线学习优化 | 第43-44页 |
| ·定周期延误最小优化结果在线应用 | 第44-46页 |
| ·变周期延误最小离线 Q 学习绿时优化模型 | 第46-48页 |
| ·变周期延误最小离线 Q 学习优化 | 第46-47页 |
| ·变周期延误最小优化结果在线应用 | 第47-48页 |
| ·模型在线优化效果对比 | 第48-49页 |
| ·本章小结 | 第49-51页 |
| 第四章 基于 Q 学习理论的多路口相位差优化模型 | 第51-61页 |
| ·相位差及公共周期 | 第51-52页 |
| ·相位差 | 第51-52页 |
| ·公共周期 | 第52页 |
| ·MAXBAND 相位差优化方法 | 第52-53页 |
| ·离线 Q 学习相位差优化模型的构建 | 第53-55页 |
| ·实验环境 | 第55-56页 |
| ·基于离线 Q 学习的相位差优化 | 第56-59页 |
| ·相位差离线 Q 学习优化 | 第56-57页 |
| ·相位差优化结果在线应用 | 第57-59页 |
| ·本章小结 | 第59-61页 |
| 第五章 集成 Vissim-Excel VBA-Matlab 的仿真平台 | 第61-71页 |
| ·VISSIM 简介 | 第61-62页 |
| ·仿真平台的集成技术 | 第62-66页 |
| ·VISSIM 与 Excel VBA 接口技术 | 第62-64页 |
| ·Excel VBA 与 MATLAB 接口技术 | 第64-65页 |
| ·VISSIM、Excel VBA 与 MATLAB 集成技术 | 第65-66页 |
| ·集成 VISSIM-Excel VBA-Matlab 的仿真平台构建 | 第66-70页 |
| ·仿真平台的构建方法 | 第66-69页 |
| ·集成仿真平台的工作环境设置 | 第69页 |
| ·集成仿真平台的实际应用 | 第69-70页 |
| ·本章小结 | 第70-71页 |
| 第六章 结论和展望 | 第71-74页 |
| ·论文主要结论 | 第71-72页 |
| ·有待进一步研究的问题 | 第72-74页 |
| 参考文献 | 第74-79页 |
| 致谢 | 第79-80页 |
| 附录 A 攻读学位期间发表学术论文与科研项目 | 第80-81页 |
| 附录 B 基于 Q 学习理论的绿灯时间优化程序代码 | 第81-98页 |
| B.1 定周期等饱和度离线 Q 学习绿时优化 MATLAB 程序 | 第81-82页 |
| B.2 变周期等饱和度离线 Q 学习绿时优化 MATLAB 程序 | 第82-84页 |
| B.3 定周期延误最小离线 Q 学习绿时优化 MATLAB 程序 | 第84-86页 |
| B.4 变周期延误最小离线 Q 学习绿时优化 MATLAB 程序 | 第86-88页 |
| B.5 控制 VISSIM 基本功能的 VBA 程序 | 第88-90页 |
| B.6 定周期绿时方案在线优化应用的 VBA 程序 | 第90-93页 |
| B.7 变周期绿时方案在线优化应用的 VBA 程序 | 第93-98页 |
| 附录 C 基于 Q 学习理论的相位差优化程序代码 | 第98-108页 |
