大学英语配对口语测试中评分员倾向对评分行为的影响

多面Rasch模型(MFRM)被运用来分析大学英语配对口语测试中评分员倾向对评分宽严度和一致性的影响。采用SPSS和MFRM分析4名有经验的评分员对10对考生的评价数据,结果表明不同性格特征的评分员在宽严度方面存在差异,内向的比外向的评分员更严格;而内、外向评分员在自身一致性方面没有明显的差别。

口语评分中评分员对评分标准的理解和使用——配对口试评分的报告分析

通过有声思维实验方法并辅以刺激回忆,收集四名不同性格倾向的评分员在配对口语考试评分时进行的思维报告数据,定性分析结果表明:在实际评分中,评分员对评分量表的理解和使用存在很大的差异性,具体表现在:(1)外向的评分员在评分过程中,表现的比内向的评分员更为宽容;(2)内向的评分员更多地关注评分量表中的各项具体指标和标准,而外向的评分员强调任务的完成状况和考生之间的比较、交流,和互动;(3)外向的评分员比内向的评分员更少地依赖评分量表,更多地使用非语言的特征。本研究结果对考试评分标准的修订和评分员培训均有启示。