| Acknowledgements | 第5-6页 |
| Abstract | 第6-7页 |
| 摘要 | 第8-10页 |
| Contents | 第10-12页 |
| List of Abbreviations | 第12-13页 |
| List of Tables | 第13页 |
| List of Figures | 第13-14页 |
| Chapter One Introduction | 第14-18页 |
| 1.1 Research Background | 第14-16页 |
| 1.2 Significance of the study | 第16页 |
| 1.3 Research questions | 第16-17页 |
| 1.4 Structure of the paper | 第17-18页 |
| Chapter Two Literature review | 第18-30页 |
| 2.1 Professional background as a source of rater variability | 第18-22页 |
| 2.2 Professional background as a source of construct-irrelevant variance | 第22-25页 |
| 2.3 The validity of formative assessment | 第25-28页 |
| 2.4 The necessity of a new study | 第28-30页 |
| Chapter Three Methodology | 第30-38页 |
| 3.1 Context | 第30-31页 |
| 3.2 Teacher raters | 第31-32页 |
| 3.3 Material | 第32-33页 |
| 3.3.1 Writing samples | 第32页 |
| 3.3.2 Interviews and questionnaires | 第32-33页 |
| 3.3.3 Comments tables | 第33页 |
| 3.4 Data collection procedures | 第33-35页 |
| 3.4.1 Rater orientation | 第33-34页 |
| 3.4.2 Rating session | 第34页 |
| 3.4.3 Interviews | 第34-35页 |
| 3.5 Data analysis | 第35-38页 |
| 3.5.1 Quantitative analysis | 第35-36页 |
| 3.5.2 Qualitative analysis | 第36-38页 |
| Chapter Four Results and Analysis | 第38-62页 |
| 4.1 Quantitative analyses of the scores and the comments | 第38-52页 |
| 4.1.1 Inter-rater reliability analysis of the scores | 第38页 |
| 4.1.2 Comparison of the rating scores | 第38-40页 |
| 4.1.3 Frequencies of various reasons in rater comments | 第40-45页 |
| 4.1.4 Frequencies of top concerns in rater comments | 第45-52页 |
| 4.2 Qualitative analyses of the interviews | 第52-62页 |
| 4.2.1 Teachers’ knowledge of the students as a factor underlying rater variability | 第53-57页 |
| 4.2.2 Beliefs about the writing construct as a factor underlying rater variability | 第57-62页 |
| Chapter Five Discussion | 第62-74页 |
| 5.1 Research question 1 | 第62-65页 |
| 5.1.1 First sub-question of the research question 1 | 第62-63页 |
| 5.1.2 Second sub-question of the research question 1 | 第63-64页 |
| 5.1.3 Third sub-question of the research question 1 | 第64-65页 |
| 5.2 Research question 2 | 第65-66页 |
| 5.3 Validity issues | 第66-74页 |
| 5.3.1 Raters’ perception of validity categories | 第67-70页 |
| 5.3.2 Scoring validity in formative assessment | 第70-74页 |
| Chapter Six Conclusion | 第74-78页 |
| 6.1 Conclusions of the present study | 第74-75页 |
| 6.2 Implications of the present study | 第75页 |
| 6.3 Limitations of the present study | 第75-76页 |
| 6.4 Recommendations for future study | 第76-78页 |
| References | 第78-83页 |
| Appendices | 第83-88页 |
| Appendix 1 | 第83-84页 |
| Appendix 2 | 第84-85页 |
| Appendix 3 | 第85-87页 |
| Appendix 4 | 第87-88页 |
| Appendix 5 | 第88页 |
