| 摘要 | 第1-7页 |
| Abstract | 第7-19页 |
| CHAPTER 1 INTRODUCTION | 第19-33页 |
| ·Overview of the power market | 第19-24页 |
| ·Context of research | 第24-31页 |
| ·Objectives of the thesis | 第31页 |
| ·Outline of the thesis | 第31-33页 |
| CHAPTER 2 POWER GENERATION INDUSTRIAL MARKET | 第33-46页 |
| ·Introduction | 第33-36页 |
| ·A day-ahead wholesale power market | 第36-41页 |
| ·Supply offers | 第39-40页 |
| ·Demand bids | 第40-41页 |
| ·Pay-as-bid auction markets | 第41页 |
| ·Uniform price auction markets | 第41-43页 |
| ·Single-side auction | 第41-42页 |
| ·Double-side auctions | 第42-43页 |
| ·A pay-as-bid comparison with a uniform price auction | 第43-44页 |
| ·Conclusion | 第44-46页 |
| CHAPTER 3 REINFORCEMENT LEARNING | 第46-61页 |
| ·Overview | 第46-48页 |
| ·RE-learning algorithm | 第48-53页 |
| ·Roth-Erev algorithm | 第48-50页 |
| ·Modified Roth-Erev algorithm | 第50页 |
| ·Variant Roth-Erev algorithm | 第50-53页 |
| ·Q-learning algorithm | 第53-59页 |
| ·Greedy method | 第55-56页 |
| ·ε-greedy method | 第56-57页 |
| ·Boltzmann exploration method | 第57-58页 |
| ·Boltzmann ε-greedy method | 第58-59页 |
| ·Conclusion | 第59-61页 |
| CHAPTER 4 THE Q-LEARNING ALGORITHM FOR SUPPLIERS IN THE WHOLESALE POWER MARKET | 第61-78页 |
| ·Introduction | 第61-63页 |
| ·The Q-learning for Suppliers in a Wholesale Power Market | 第63-64页 |
| ·Simulation | 第64-76页 |
| ·Simulation 1 | 第65-66页 |
| ·The results of simulation 1 | 第66-71页 |
| ·Simulation 2 | 第71-72页 |
| ·The results of simulation 2 | 第72-76页 |
| ·Conclusion | 第76-78页 |
| CHAPTER 5 THE FUZZY Q-LEARNING ALGORITHM FOR SUPPLIERS IN A WHOLESALE POWER MARKET | 第78-91页 |
| ·Introduction | 第78-80页 |
| ·Fuzzy logic | 第80页 |
| ·Fuzzy Q-learning algorithm for electricity markets | 第80-83页 |
| ·Simulation | 第83-89页 |
| ·Simulation 01 | 第83-86页 |
| ·Simulation 02 | 第86-89页 |
| ·Conclusion | 第89-91页 |
| CHAPTER 6 THE SA-Q LEARNING APPLICATION TO THE DYNAMIC POWER MARKETS | 第91-106页 |
| ·Introduction | 第91-93页 |
| ·The SA-Q learning algorithm | 第93-94页 |
| ·The dynamic power markets | 第94-98页 |
| ·Supply offers | 第96-97页 |
| ·Demand bids | 第97-98页 |
| ·The SA-Q learning for dynamic power markets | 第98页 |
| ·Simulation | 第98-104页 |
| ·Conclusion | 第104-106页 |
| CONCLUSION AND FUTURE WORK | 第106-114页 |
| References | 第114-121页 |
| Appendix A: List of publications | 第121-122页 |
| Appendix B: The SA-Algorithm | 第122-125页 |
| Appendix C: 中文摘要 | 第125-132页 |
| Acknowledgment | 第132页 |
