学位论文 > 优秀研究生学位论文题录展示
高考英语写作评分员偏颇性研究
作 者: 王占芳
导 师: 聂建中
学 校: 山西大学
专 业: 外国语言学及应用语言学
关键词: 写作测试 评分员严厉度 评分员偏颇性 多侧面分析
分类号: G634.41
类 型: 硕士论文
年 份: 2010年
下 载: 95次
引 用: 0次
阅 读: 论文下载
内容摘要
本篇论文采用基于现代项目反映理论(Item Response Theory)的多侧面Rasch模型研究评分员在评分过程中所表现的宽严度和评分一致性;同时通过Rasch模型的偏差分析,研究评分员在评卷过程中针对不同考生,不同维度(内容,语法,词汇,技巧,结构)及高考评分量表的分数段表现出的偏颇模式,即:评分员---考生,评分员---维度以及评分员---量表之间的偏颇模式。本文从山西某大学大一新生档案中随机抽取10份英语作文试卷并由10位评分员评分。每位评分员分别运用高考评分量表和由“内容”、“语法”、“词汇”、“写作技巧”和“结构”五个维度组成的特定量表对每份试卷进行评分,并从这五个方面对考生的写作能力进行考察。经过分析,得出以下结论:1)评分员在评卷过程中表现出的严厉度有显著差异。使用高考评分量表时,9号评分员最为严厉,10号评分员最为宽松;而采用五个维度的等级量表,1号评分员严厉度水平最高,10号评分员则最低。2)并非所有的评分员在评分过程中都能保持自身评分的一致性,不同评分员在评阅不同维度时表现出评分不二致的现象。3)评分员对写作水平相对较高的考生表现出的偏颇度较高。4)不同评分员在五个不同维度上表现出的偏颇模式不同。5)评分员在高考评分量表上的一个或几个分数段上表现出偏颇。本研究对如何改善和提高写作评分中的评分员信度有所帮助;可以为评分员的选拔和培训提供反馈信息;根据评分员与量表的偏颇分析,可以帮助改进和补充评分标准。同时,也证明多侧面Rasch模型是写作阅卷质量监控和行为测试评估的有力工具。
|
全文目录
Acknowledgements 3-4 Abstract in English 4-5 Abstracet in Chinese 5-8 List of tables 8-11 Chapter One Introduction 11-15 1.1 Research Orientation and Questions 11 1.2 The Rationale of the Present Study 11-12 1.3 Approaches to the Study 12-13 1.4 Outline of the Thesis 13-15 Chapter Two Literature Review 15-29 2.1 Recent Development of Writing Assessment 15-16 2.2 Rater Bias in Relation to Some Aspect of Test Usefulness 16-20 2.2.1 What is Test Bias? 16-17 2.2.2 Rater Bias in Relation to Rating Reliability 17-20 2.3 Rater Effects 20-22 2.3.1 Raters' Characteristics 20-22 2.4 Rater Bias in Relation to Rating Scales 22-25 2.4.1 Scoring Methods in Terms of Three Kinds of Rating Scales 22-24 2.4.2 Rater Bias towards Rating Scales 24-25 2.5 Rater Bias in Relation to Rater Training 25-26 2.6 Previous Studies on Rater Bias 26-29 Chapter Three Methodology 29-34 3.1 Quantitative Study 29-32 3.1.1 Participants 29-30 3.1.2 Writing Task 30 3.1.3 Instruments 30-32 3.2 Qualitative Study 32-34 3.2.1 Questionnaire 32-34 Chapter Four Data Analysis 34-46 4.1 Results of Facet Analysis 34-42 4.1.1 Overview Reports 34-38 4.1.2 Raters Measurement Report 38-40 4.1.3 Candidates Measurement Report 40-41 4.1.4 Traits Measurement Report 41 4.1.5 Scale Measurement Report 41-42 4.2 RESULTS OF BIAS ANALYSIS 42-45 4.2.1 Rater vs Candidate Bias Analysis Results 42-43 4.2.2 Rater vs Trait Bias Analysis Results 43-44 4.2.3 Rater vs NMET Scale Bias Analysis Results 44-45 4.3 Results of the Questionnaire 45-46 Chapter Five Conclusion 46-52 5.1 Discussion of Main Findings 46-49 5.2 Implications of the Present Study 49-51 5.3 Limitations of the Present Study 51 5.4 Suggestions for Future Research 51-52 Bibliography 52-57 Appendices 57-68 Appendix 1:NMET Rating Scale(高考作文评分量表) 57-59 Appendix 2:Scale for this Study 59-60 Appendix 3:NMET Writing Task 60-61 Appendix 4:Questionnaire 61-62 Appendix 5:Scripts for Facets Analysis 62-68 Publication 68-69 Personal Profiles 69-71
|
相似论文
- 高中英语写作直接测试与间接测试效度差异研究,G633.41
- 多面RASCH模型在HSK(中级)口语评分检验中的应用,H195
- 英语写作测试中评分环节真实性的实证性研究,H319
- 自我评估训练对学生大学英语写作测试成绩的影响,H319.3
- 英语写作题难度影响因素及控制,H310.4
- 母语思维对二语写作测试成绩的影响,H09
- 从二语习得视角研究写作测试任务难度,H09
- 大学英语四级写作测试对写作教学反拨效应的实证研究,H319.3
- 大学英语四、六级考试写作测试交际性改革建议,H310.4
- 交际性测试理论在大学英语四级写作测试中的应用,H319
- 大学英语课堂环境下读写结合写作测试效度研究,H319
- 英语专业写作测试任务的真实性研究,H319.36
- 写作测试对初中英语教学的反拨作用与教学启示,G633.41
- 从交际测试角度对大学英语四六级写作测试的批判性分析和评估及其对写作测试设计的启示,H310.42
- 多侧面Rasch模式在英语写作测试中的应用,H319.9
- A Study of the Influences of Different Task Types and Task Difficulties on EFL Learners\' Performance in Writing Tests,H319
- PETS三级考试中作文评分效度研究,H319
- 对英语写作评分标准,H319
- 高三英语写作测试任务的真实性研究,G633.41
- 大学英语四级写作测试反拨作用的实证研究,H319
中图分类: > 文化、科学、教育、体育 > 教育 > 中等教育 > 教材、课本、辅助教材
© 2012 www.xueweilunwen.com
|