英语写作评估中整体评分和分项评分分数变异性和信度研究--基于概化理论的分析
在教育测量领域，写作评估是一种常见的语言表现评估类型，也是最常见的主观测试类型之一。不论是在课堂测试还是在大规模标准化英语语言考试中，写作都是重要组成部分之一。然而，由于主观测试中各种因素的复杂性，很容易导致学生写作成绩误差来源的多元性，从而造成学生的写作成绩缺乏信度、效度以及公平性。同一篇作文，不同背景的评分员采用不同的评分方法给出的分数可能会有很大的差别。评分员背景和评分方法这些因素独立或交互作用，也增加了分数误差来源的复杂性，并使得分数解释的难度进一步加大。这种情况下，写作评分的信度、效度和公平性就无法得到保证。 运用概化理论，本研究旨在探究在职教师和职前教师评分员分别采用整体评分法和分项评分法对初中英语写作分数变异性和信度的影响。基于此目的，本研究邀请了10名评分员（5名在职教师和5名职前教师）分别采用整体评分法和分项评分法对12篇初中生的写作样本进行评分，两种评分方法的时间间隔为三周。 本研究的写作样本是从华中地区一所初级中学两个班的80名八年级学生的80篇作文中抽取的12篇作文。在评分之前， 10名评分员先受到了来自研究者的培训。通过SPSS和GENOVA分析，定量结果表明，在适当的评分员培训下，背景相似的评分员的整体评分可以达到与分项评分相当的信度。此外，不管是整体评分法还是分项评分法，硕士学历背景为英语学科教学的职前教师都能够比本科学历背景为英语专业的在职教师的写作评分产生更高的分数信度。 基于对上述研究结果的分析与总结，本研究对改善英语写作评估现状提出了建议。一方面，制定统一、详细、清晰且易于遵循的评分标准来规范评分过程；另一方面，提供更充分和系统的评分员培训。
中学英语;写作评估;分数变异性;分数信度
江苏大学
硕士
教育学
黄金岩
2023
中文
G633.41
2023-11-15（万方平台首次上网日期，不代表论文的发表时间）